CN111698421B - 一种图像处理方法、装置及计算机可读存储介质 - Google Patents
一种图像处理方法、装置及计算机可读存储介质 Download PDFInfo
- Publication number
- CN111698421B CN111698421B CN202010515810.6A CN202010515810A CN111698421B CN 111698421 B CN111698421 B CN 111698421B CN 202010515810 A CN202010515810 A CN 202010515810A CN 111698421 B CN111698421 B CN 111698421B
- Authority
- CN
- China
- Prior art keywords
- image
- focus
- focus image
- parameters
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种图像处理方法、装置及计算机可读存储介质。其中方法包括:获取拍摄装置采集的第一帧图像,并获取第一焦点图像的参数;根据第一焦点图像的参数从第一帧图像中获取第一焦点图像;确定第一帧图像与拍摄装置采集的第二帧图像之间的重叠图像;若第一焦点图像存在于重叠图像中,则根据变焦倍率对第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。实现了拍摄装置的抖动幅度较小时,显示屏中显示的图像不作更新,用户在终端显示屏中看到的图像不会因为抖动发生变化,有利于降低抖动对成像效果的影响。
Description
技术领域
本申请涉及摄像技术领域,尤其涉及一种图像处理方法、装置及计算机可读存储介质。
背景技术
相机在拍摄过程中会受到使用者或环境的影响发生抖动,拍摄对象在成像中的位置会随着相机抖动的方向发生偏移,甚至是拍摄对象消失。尤其是需要使用高倍变焦时,抖动对成像效果的影响更加明显,即使是微小的抖动也会导致拍摄对象在成像中的位置发生明显的偏移。如何降低抖动对成像效果的影响已成为亟待解决的技术问题。
发明内容
本申请公开了一种图像处理方法、装置及计算机可读存储介质,有利于降低抖动对成像效果的影响。
第一方面,本申请提供了一种图像处理方法,该方法包括:
在一个实施例中,该方法包括:获取第一帧图像,并获取第一焦点图像的参数;根据所述第一焦点图像的参数从所述第一帧图像中获取所述第一焦点图像;确定所述第一帧图像与第二帧图像之间的重叠图像;若所述第一焦点图像存在于所述重叠图像中,则根据变焦倍率对所述第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。
在一个实施例中,该方法包括:确定所述重叠图像的参数;基于所述第一焦点图像的参数与所述重叠图像的参数,确定所述第一焦点图像存在于所述重叠图像中。
在一个实施例中,该方法包括:获取拍摄装置采集所述第一帧图像时所在的位置,与采集所述第二帧图像时所在的位置之间的位移信息;确定所述第一帧图像的参数;根据所述位移信息与所述第一帧图像的参数确定所述重叠图像的参数。
在一个实施例中,该方法包括:若所述第一焦点图像的各像素点的坐标值均存在于所述重叠图像的所有像素点的坐标值组成的坐标集合内,则确定所述第一焦点图像存在于所述重叠图像中。
在一个实施例中,该方法包括:若所述第一焦点图像的部分像素点的坐标值存在于所述坐标集合内,则确定所述第一焦点图像的部分图像存在于所述重叠图像中;将未存在于所述重叠图像中的所述第一焦点图像的部分图像确定为第一子焦点图像,将存在于所述重叠图像中的所述第一焦点图像的部分图像确定为第二子焦点图像;将所述第一子焦点图像与所述第二子焦点图像进行组合,得到第三焦点图像;根据所述变焦倍率对所述第三焦点图像进行缩放处理,并显示缩放处理后的第三焦点图像。
在一个实施例中,该方法包括:根据所述第一焦点图像的参数和所述重叠图像的参数,确定所述第一子焦点图像的参数,所述第一子焦点图像的参数用于指示所述第一子焦点图像在所述第一帧图像中的位置信息;根据所述第一子焦点图像的参数从所述第一帧图像中获取所述第一子焦点图像;根据所述第一焦点图像的参数和所述重叠图像的参数,确定所述第二子焦点图像的参数,所述第二子焦点图像的参数用于指示所述第二子焦点图像在所述第二帧图像中的位置信息;根据所述第二子焦点图像的参数从所述第二帧图像中获取所述第二子焦点图像。
在一个实施例中,该方法包括:若所述第一焦点图像未存在于所述重叠图像中,则根据所述第一焦点图像的参数确定第二焦点图像的参数,所述第二焦点图像的参数用于指示所述第二焦点图像在所述第二帧图像中的位置信息;根据所述第二焦点图像的参数从所述第二帧图像中获取所述第二焦点图像,所述第二焦点图像在所述第二帧图像中的相对位置与所述第一焦点图像在所述第一帧图像中的相对位置相同;根据所述变焦倍率对所述第二焦点图像进行缩放处理,并显示缩放处理后的第二焦点图像。
第二方面,本申请提供了一种图像处理装置,包括:
获取单元,用于获取第一帧图像,并获取第一焦点图像的参数;
获取单元,还用于根据所述第一焦点图像的参数从所述第一帧图像中获取所述第一焦点图像;
确定单元,用于确定所述第一帧图像与第二帧图像之间的重叠图像;
显示单元,用于若所述第一焦点图像存在于所述重叠图像中,则根据变焦倍率对所述第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。
第三方面,本申请提供了一种图像处理装置,包括处理器、存储器和通信接口,所述处理器、所述存储器和所述通信接口相互连接,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行上述第一方面所述的图像处理方法。
第四方面,本申请提供了一种计算机可读存储介质,所述计算机可读存储介质存储有一条或多条指令,所述一条或多条指令适用于由处理器加载并执行上述第一方面所述的图像处理方法。
本申请中,获取拍摄装置采集的第一帧图像,并获取第一焦点图像的参数;根据第一焦点图像的参数从第一帧图像中获取第一焦点图像;确定第一帧图像与拍摄装置采集的第二帧图像之间的重叠图像;若第一焦点图像存在于重叠图像中,则根据变焦倍率对第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。实现了拍摄装置的抖动幅度较小时,显示屏中显示的图像不作更新,用户在终端显示屏中看到的图像不会因为抖动发生变化,有利于降低抖动对成像效果的影响。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a为本申请实施例提供的一种图像处理方法的流程图;
图1b为本申请实施例提供的一种图像处理方法的示例图;
图2a为本申请实施例提供的又一种图像处理方法的流程图;
图2b为本申请实施例提供的又一种图像处理方法的示例图;
图3a为本申请实施例提供的一种图像处理方法的流程图;
图3b为本申请实施例提供的又一种图像处理方法的示例图;
图4为本申请实施例提供的又一种图像处理方法的流程图;
图5为本申请实施例提供的一种图像处理装置的结构示意图;
图6为本申请实施例提供的又一种图像处理装置的结构示意图。
具体实施方式
下面将结合附图对本申请实施例中的技术方案进行描述。
本申请中的执行主体拍摄装置可以集成于终端中,也可以是单独存在的图像或视频设备,本申请实施例对此不做限定。拍摄装置可以是摄像头、监控器等。终端可以包括但不限于:智能手机(如Android手机、iOS手机等)、平板电脑、便携式个人计算机、移动互联网设备(MobileInternetDevices,简称MID)等设备,本发明实施例不做限定。
在图1a所示的图像处理方法中,图像处理的流程主要包括:①获取第一帧图像,并获取第一焦点图像的参数;②根据第一焦点图像的参数从第一帧图像中获取第一焦点图像;③确定第一帧图像与第二帧图像之间的重叠图像;④若第一焦点图像存在于重叠图像中,则根据变焦倍率对第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。
通过上述图像处理方法,实现了拍摄装置的抖动幅度较小时,显示屏中显示的图像不作更新,用户在终端显示屏中看到的图像不会因为抖动发生变化,有利于降低抖动对成像效果的影响。
下面对本申请提供的一种图像处理方法进行详细介绍。
请参阅图1a、图1b,图1a为本申请实施例提供的一种图像处理方法的流程图,图像处理方法包括但不限于如下步骤101~步骤104。
S101、获取第一帧图像,并获取第一焦点图像的参数。
在一个实施方式中,第一帧图像是拍摄装置抖动前采集的原始图像,第一焦点图像是第一帧图像中需要被放大的某一部分画面。用户通过调节拍摄装置的变焦倍率,使得第一帧图像中的像素面积根据变焦倍率增大,直至第一焦点图像放大到占据整个终端显示屏,此时该显示屏中显示的图像即为用户所需拍摄的图像。
例如,用户打开手机中的相机准备对房屋的门进行拍摄,相机采集第一帧图像,并将第一帧图像在手机显示屏中进行显示,此时显示屏中的图像内容包括房屋的门、窗、屋顶等。用户通过手指在显示屏进行点击操作、滑动操作或手指缩放操作等方式以调节变焦倍率并发送拍摄指令至拍摄装置,使得拍摄装置将第一帧图像中的第一焦点图像(图像内容包括门)在显示屏中放大(使得图像中的主体为门),将此时显示屏中显示的图像确定为用户所需拍摄的图像。若当用户按下拍摄键时手机未发生抖动,则相机对此时显示屏中显示的图像进行拍摄,并将拍摄得到的图像存储在手机中。
在一种实施方式中,拍摄装置接收到用户的拍摄指令,拍摄指令中携带第一焦点图像的参数,根据拍摄指令确定第一焦点图像中的各像素点在第一帧图像中的坐标值,得到第一焦点图像的参数。第一帧图像的参数可以是第一帧图像中所有像素点的坐标值组成的坐标集合(如集合a),第一焦点图像的参数可以是第一焦点图像中所有像素点的坐标值组成的坐标集合(如集合b),其中,集合b包括于集合a中。
如图1b所示,根据拍摄指令确定第一焦点图像中的各像素点在第一帧图像中的坐标值,得到第一焦点图像的参数为:以(X3,Y3)为原点的图像(即图1b中字母B所示灰色填充区域)中的各像素点的坐标值组成的坐标集合。
在一种实施方式中,拍摄指令中还携带了变焦倍率N,变焦倍率N是用户通过手指在显示屏进行点击操作、滑动操作或手指缩放操作等方式确定的,通过调节变焦倍率可以使拍摄者不移动拍摄位置也能够自由地改变第一焦点图像在显示屏中的显示效果。例如,图1b所示的第一焦点图像B在第一帧图像中占据1/8的面积,当变焦倍率N为1倍时,第一焦点图像根据变焦倍率放大一倍后在显示屏中占据1/4的面积。当变焦倍率N为2倍时,第一焦点图像根据变焦倍率放大两倍后在显示屏中占据1/2的面积。
S102、根据第一焦点图像的参数从第一帧图像中获取第一焦点图像。
在一种实施方式中,拍摄装置获取第一帧图像的参数:以(X1,Y1)为原点的图像中的各像素点的坐标值组成的坐标集合。在第一帧图像中查找以(X3,Y3)为原点的图像中的各像素点的坐标值组成的坐标集合所表示的图像B,在第一帧图像中裁剪出图像B,并将裁剪得到的图像B确定为第一焦点图像。根据变焦倍率N对第一焦点图像B进行缩放处理得到图像A,将该图像A发送至终端显示屏进行显示。例如,第一焦点图像B的长度为W、宽度为H,图像A的长度与宽度也是根据变焦倍率N进行缩放处理,分别为W×N、H×N。
S103、确定第一帧图像与第二帧图像之间的重叠图像。
在一种实施方式中,将拍摄装置抖动后采集的原始图像确定为第二帧图像,拍摄装置采集第一帧图像时所在的位置,与采集第二帧图像时所在的位置因为抖动发生偏移,将偏移角度与偏移值确定为拍摄第一帧图像与第二帧图像的位移信息。位移信息可以是通过终端中的陀螺仪等传感器测量得到的。
在一种实施方式中,确定第一帧图像的参数,根据位移信息与第一帧图像的参数计算重叠图像的参数,重叠图像是第一帧图像中与第二帧图像之间的重叠区域对应的图像(即图1b中斜线填充区域D)。
根据偏移角度与偏移值对第一帧图像的参数进行勾股定理计算,得到重叠图像D中各像素点的坐标值。例如,第一帧图像中一个像素点的坐标为(X1,Y1),根据位移信息计算得到重叠图像D中一个像素点的坐标为(X2,Y2),其中,坐标为(X1,Y1)的像素点在第一帧图像中的相对位置与坐标为(X2,Y2)的像素点在重叠图像D中的相对位置相同。
在一种实施方式中,重叠图像还可以是根据第一帧图像的参数与第二帧图像的参数计算得到。将第二帧图像中的各像素点的坐标值映射于第一帧图像中,若第二帧图像中的像素点的坐标值经过映射后落在第一帧图像中,则该像素点位于重叠图像D中,将第二帧图像中经过映射后落在第一帧图像中的所有像素点组成的图像确定为重叠图像,将第一帧图像中存在于重叠图像的各像素点的坐标值确定为重叠图像中各像素点的坐标值。
如图1b所示,获取第二帧图像的参数为:以(X2,Y2)为原点的图像中的各像素点的坐标值组成的坐标集合。将第二帧图像中经过映射后落在第一帧图像中的所有像素点组成的图像确定为重叠图像D,将第一帧图像中存在于重叠图像D的各像素点的坐标值确定为重叠图像D中各像素点的坐标值。重叠图像D的参数为:以(X2,Y2)为原点的斜线填充区域D中的各像素点的坐标值组成的坐标集合。
S104、若第一焦点图像存在于重叠图像中,则根据变焦倍率对第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。
在一种实施方式中,判断第一焦点图像的各像素点的坐标值是否均存在于重叠图像的所有像素点的坐标值组成的坐标集合内。若第一焦点图像的各像素点的坐标值均存在于重叠图像的所有像素点的坐标值组成的坐标集合内,则确定第一焦点图像存在于重叠图像中,在此情况下,可以表明拍摄装置的抖动幅度较小。
如图1b所示,第一焦点图像B的各像素点的坐标值均存在于重叠图像D的所有像素点的坐标值组成的坐标集合内,即确定第一焦点图像B存在于重叠图像D中。
当确定拍摄装置的抖动幅度较小时,可以认为微小的抖动是用户拍摄时无意造成,此时用户意图并非希望改变拍摄的对象,即用户是目的在于拍摄第一焦点图像中的拍摄对象。所以在拍摄装置的抖动幅度较小时,仍旧对第一焦点图进行缩放,显示屏中显示的图像仍旧是根据变焦倍率对第一焦点图像进行缩放处理后得到的图像A。通过这种方式,在拍摄装置的抖动幅度较小时,不会对显示屏中显示的图像进行更新,拍摄对象在显示屏显示的图像中位置也不会因为抖动发生偏移。此时,用户不会察觉到抖动的存在,有利于提高用户体验。
上述实施例中,通过获取第一帧图像,并获取第一焦点图像的参数;根据第一焦点图像的参数从第一帧图像中获取第一焦点图像;确定第一帧图像与第二帧图像之间的重叠图像;若第一焦点图像存在于重叠图像中,则根据变焦倍率对第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。即抖动幅度较小时,显示屏中显示的图像不作更新,用户在终端显示屏中看到的图像不会因为抖动发生变化,有利于降低抖动对成像效果的影响。
请参阅图2a、图2b,图2a为本申请实施例提供的又一种图像处理方法的流程图。如图2a所示,图像处理方法包括但不限于如下步骤201~步骤204:
S201、若第一焦点图像的部分像素点的坐标值存在于坐标集合内,则确定第一焦点图像的部分图像存在于重叠图像中。
在一种实施方式中,当拍摄装置的抖动幅度较大、但仍属于预设抖动幅度内时,会出现第一焦点图有一部分存在于重叠图像中,一部分未重叠图像中。如图2b所示,第一焦点图像有一部分像素点的坐标值存在于重叠图像中,还有一部分像素点的坐标值不存在于重叠图像中。
S202、将未存在于重叠图像中的第一焦点图像的部分图像确定为第一子焦点图像,将存在于重叠图像中的第一焦点图像的部分图像确定为第二子焦点图像。
在一种实施方式中,将未存在于重叠图像中的第一焦点图像的部分图像确定为第一子焦点图像。根据第一焦点图像的参数和重叠图像的参数之间的坐标差值,确定出第一子焦点图像的参数,根据第一子焦点图像的参数确定出第一子焦点图像在第一帧图像中的位置。根据第一子焦点图像的参数从第一帧图像中获取并裁剪出第一子焦点图像。
在一种实施方式中,将存在于重叠图像中的第一焦点图像的部分图像确定为第二子焦点图像。根据第一焦点图像的参数和重叠图像的参数之间的坐标差值,确定出第二子焦点图像的参数,根据第二子焦点图像的参数确定出第二子焦点图像在第二帧图像中的位置。根据第二子焦点图像的参数从第二帧图像中获取并裁剪出第二子焦点图像。
S203、将第一子焦点图像与第二子焦点图像进行组合,得到第三焦点图像。
S204、根据变焦倍率对第三焦点图像进行缩放处理,并显示缩放处理后的第三焦点图像。
在一种实施方式中,将第一子焦点图像与第二子焦点图像进行拼接组合,得到第三焦点图像。根据变焦倍率N对第三焦点图像进行缩放处理,并在显示屏中显示缩放处理后的第三焦点图像。缩放处理后的第三焦点图像与图像A相同,因此,显示屏中显示的图像仍旧为图像A。通过这种方式,在拍摄装置的抖动幅度较大、但仍属于预设抖动幅度内时,也不会对显示屏中显示的图像进行更新,拍摄对象在显示屏显示的图像中位置也不会因为抖动发生偏移。此时,用户不会察觉到抖动的存在,有利于提高用户体验。
可见,通过本申请实施例,将未存在于重叠图像中的第一焦点图像的部分图像确定为第一子焦点图像,将存在于重叠图像中的第一焦点图像的部分图像确定为第二子焦点图像;将第一子焦点图像与第二子焦点图像进行组合,得到第三焦点图像;根据变焦倍率对第三焦点图像进行缩放处理,并显示缩放处理后的第三焦点图像。当抖动幅度超过预设像素值时,部分第一焦点图像在第二帧图像中已经不存在了,通过将第一子焦点图像与第二子焦点图像进行组合后进行缩放并显示,可以实现在抖动幅度较大时,显示屏中显示的图像不作更新,用户在终端显示屏中看到的图像不会因为抖动发生变化,有利于降低抖动对成像效果的影响。
请参阅图3a、图3b,图3a为本申请实施例提供的又一种图像处理方法的流程图。如图3a所示,图像处理方法包括但不限于如下步骤301~步骤303:
S301、若第一焦点图像未存在于重叠图像中,则根据第一焦点图像的参数确定第二焦点图像的参数。
在一种实施方式中,若第一焦点图像未存在于重叠图像中,说明抖动幅度大、且超过预设抖动幅度时,可以认为抖动是用户主动的想要改变拍摄对象所带来的,即用户可能希望调整拍摄视角重新确定拍摄对象。因此,拍摄装置在第二帧图像中重新选取焦点图像,将重新选取的焦点图像作为第二焦点图像。第二焦点图像在第二帧图像中的相对位置与第一焦点图像在第一帧图像中的相对位置相同,拍摄装置根据第一焦点图像的参数在第二帧图像中确定第二焦点图像的参数。如图3b所示,确定第二焦点图像C的参数为:以(X4,Y4)为原点的图像中的各像素点的坐标值组成的坐标集合。其中,(X4,Y4)在第二帧图像中的相对位置与(X3,Y3)在第一帧图像中的相对位置相同。
S302、根据第二焦点图像的参数从第二帧图像中获取第二焦点图像。
S303、根据变焦倍率对第二焦点图像进行缩放处理,并显示缩放处理后的第二焦点图像。
在一种实施方式中,在第二帧图像中查找以(X4,Y4)为原点的图像中的各像素点的坐标值组成的坐标集合所表示的图像C,在第二帧图像中裁剪出图像C,将裁剪得到的图像C确定为第二焦点图像。根据变焦倍率N对第二焦点图像C进行缩放处理,得到图像A’(与抖动幅度较小时、第一焦点图像B对应的图像A不相同),将终端显示屏中的图像A更新为图像A’。在抖动幅度大,且超过预设抖动幅度的时候,可以认为抖动是用户主动的想要改变拍摄对象所带来的,即用户可能希望通过调整拍摄视角重新在第二帧图像中确定拍摄对象,所以是对第二焦点图像进行缩放,而非第一焦点图像。
可见,通过本申请实施例,若第一焦点图像未存在于重叠图像中,则根据第一焦点图像的参数确定第二焦点图像的参数;根据第二焦点图像的参数从第二帧图像中获取第二焦点图像;根据变焦倍率对第二焦点图像进行缩放处理,并显示缩放处理后的第二焦点图像。当抖动幅度较大且超过预设抖动幅度的时候,认定为用户需要重新确定拍摄对象,则在第二帧图像中重新选取焦点图进行缩放处理后显示在终端显示屏中,有利于提高用户体验。
下面通过一个完整的例子结合图4对本申请提供的图像处理方法进行说明:
S401、获取第一帧图像,并获取第一焦点图像的参数。
拍摄装置采集第一帧图像,并将第一帧图像在手机显示屏中进行显示。拍摄装置接收到用户的拍摄指令,拍摄指令中携带第一焦点图像的参数与变焦倍率N。
如图1b所示,根据拍摄指令确定第一焦点图像中的各像素点在第一帧图像中的坐标值,得到第一焦点图像的参数为:以(X3,Y3)为原点的图像(即图1b中字母B所示灰色填充区域)中的各像素点的坐标值组成的坐标集合。
通过第一焦点图像的参数可以得到第一焦点图像的长度为W,宽度为H,尺寸为W×H。
S402、根据第一焦点图像的参数从第一帧图像中获取第一焦点图像。
拍摄装置获取第一帧图像的参数:以(X1,Y1)为原点的图像中的各像素点的坐标值组成的坐标集合。在第一帧图像中查找以(X3,Y3)为原点的图像中的各像素点的坐标值组成的坐标集合所表示的图像B,在第一帧图像中裁剪出图像B,并将裁剪得到的图像B确定为第一焦点图像。拍摄装置根据变焦倍率N对第一焦点图像B进行缩放处理得到图像A,将该图像A发送至终端显示屏进行显示。其中,第一焦点图像B的长度为W、宽度为H,图像A的长度与宽度也是根据变焦倍率N进行缩放处理,分别为W×N、H×N。
S403、确定第一帧图像与第二帧图像之间的重叠图像。
确定第一帧图像的参数,根据位移信息与第一帧图像的参数计算重叠图像的参数,重叠图像是第一帧图像中与第二帧图像之间的重叠区域对应的图像(即图1b中斜线填充区域D)。第一帧图像中一个像素点的坐标为(X1,Y1),根据位移信息计算得到重叠图像D中一个像素点的坐标为(X2,Y2),其中,坐标为(X1,Y1)的像素点在第一帧图像中的相对位置与坐标为(X2,Y2)的像素点在重叠图像D中的相对位置相同。
S404、若第一焦点图像存在于重叠图像中,则根据变焦倍率对第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。
第一焦点图像B的各像素点的坐标值均存在于重叠图像D的所有像素点的坐标值组成的坐标集合内,即确定第一焦点图像B存在于重叠图像D中。
当确定拍摄装置的抖动幅度较小时,可以认为微小的抖动是用户拍摄时无意造成,此时用户意图并非希望改变拍摄的对象,即用户是目的在于拍摄第一焦点图像中的拍摄对象,所以在拍摄装置的抖动幅度较小时,仍旧对第一焦点图进行缩放,显示屏中显示的图像仍旧是根据变焦倍率对第一焦点图像进行缩放处理后得到的图像A。通过这种方式,在拍摄装置的抖动幅度较小时,不会对显示屏中显示的图像进行更新,拍摄对象在显示屏显示的图像中位置也不会因为抖动发生偏移。此时,用户不会察觉到抖动的存在,有利于提高用户体验。
S405、若第一焦点图像未存在于重叠图像中,则根据第一焦点图像的参数确定第二焦点图像的参数,根据第二焦点图像的参数从第二帧图像中获取第二焦点图像。
若第一焦点图像未存在于重叠图像中,说明抖动幅度较大,可以较大的抖动认为是用户主动的想要改变拍摄对象所带来的,即用户可能希望重新确定拍摄对象。因此,拍摄装置在第二帧图像中重新选取焦点图像,将重新选取的焦点图像作为第二焦点图像。第二焦点图像在第二帧图像中的相对位置与第一焦点图像在第一帧图像中的相对位置相同,拍摄装置根据第一焦点图像的参数在第二帧图像中确定第二焦点图像的参数。如图3b所示,确定第二焦点图像C的参数为:以(X4,Y4)为原点的图像中的各像素点的坐标值组成的坐标集合。其中,(X4,Y4)在第二帧图像中的相对位置与(X3,Y3)在第一帧图像中的相对位置相同。
在第二帧图像中查找以(X4,Y4)为原点的图像中的各像素点的坐标值组成的坐标集合所表示的图像C,在第二帧图像中裁剪出图像C,将裁剪得到的图像C确定为第二焦点图像。
S406、根据变焦倍率对第二焦点图像进行缩放处理,并显示缩放处理后的第二焦点图像。
根据变焦倍率N对第二焦点图像C进行缩放处理,得到图像A’(与抖动幅度较小时、第一焦点图像B对应的图像A不相同),将终端显示屏中的图像A更新为图像A’。在抖动幅度大的时候,可以抖动认为是用户主动的想要改变拍摄对象所带来的,即用户可能希望重新在第二帧图像中确定拍摄对象,所以是对第二焦点图像进行缩放,而非第一焦点图像。
通过本申请实施例,通过获取第一帧图像,并获取第一焦点图像的参数;根据第一焦点图像的参数从第一帧图像中获取第一焦点图像;确定第一帧图像与第二帧图像之间的重叠图像;若第一焦点图像存在于重叠图像中,则根据变焦倍率对第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。若第一焦点图像未存在于重叠图像中,则获取第二焦点图像;根据变焦倍率对第二焦点图像进行缩放处理后显示。即抖动幅度较小时,显示屏中显示的图像不作更新,用户在终端显示屏中看到的图像不会因为抖动发生变化;当抖动幅度较大时,认定用户需要重新确定拍摄对象,则在第二帧图像中重新选取焦点图进行缩放处理后显示在终端显示屏中,有利于提高用户体验。
上述详细阐述了本申请实施例的方法,为了便于更好地实施本申请实施例的上述方案,相应地,下面提供了本申请实施例的装置。
请参见图5,图5为本申请实施例提供的一种图像处理装置的结构示意图,图5所示的图像处理装置可以用于执行上述图1a-图4所描述的方法实施例中的部分或全部功能。各个单元的详细描述如下:
获取单元501,用于获取第一帧图像,并获取第一焦点图像的参数;
获取单元501,还用于根据第一焦点图像的参数从第一帧图像中获取第一焦点图像;
确定单元502,用于确定第一帧图像与第二帧图像之间的重叠图像;
显示单元503,用于若第一焦点图像存在于重叠图像中,则根据变焦倍率对第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。
根据本申请的一个实施例,图1a所示的图像处理方法所涉及的部分步骤可由图5所示的图像处理装置中的各个单元来执行。例如,图1a中所示的步骤101可由图5所示的获取单元501执行,步骤102可由图5所示的获取单元501执行,步骤103可由图5所示的确定单元502执行,步骤104可由图5所示的显示单元503执行。
在另一种实施方式中,参见图5,图5所示的确定单元502还用于:
确定重叠图像的参数;基于第一焦点图像的参数与重叠图像的参数,确定第一焦点图像存在于重叠图像中。
在一种实施方式中,参见图5,图5所示的确定单元502还用于:
获取拍摄装置采集第一帧图像时所在的位置,与采集第二帧图像时所在的位置之间的位移信息;确定第一帧图像的参数;根据位移信息与第一帧图像的参数确定重叠图像的参数。
在一种实施方式中,参见图5,图5所示的确定单元502还用于:
若第一焦点图像的各像素点的坐标值均存在于重叠图像的所有像素点的坐标值组成的坐标集合内,则确定第一焦点图像存在于重叠图像中。
在一种实施方式中,参见图5,图5所示的显示单元503还用于:
若第一焦点图像的部分像素点的坐标值存在于坐标集合内,则确定第一焦点图像的部分图像存在于重叠图像中;将未存在于重叠图像中的第一焦点图像的部分图像确定为第一子焦点图像,将存在于重叠图像中的第一焦点图像的部分图像确定为第二子焦点图像;将第一子焦点图像与第二子焦点图像进行组合,得到第三焦点图像;根据变焦倍率对第三焦点图像进行缩放处理,并显示缩放处理后的第三焦点图像。
在一种实施方式中,参见图5,图5所示的确定单元502还用于:
根据第一焦点图像的参数和重叠图像的参数,确定第一子焦点图像的参数,第一子焦点图像的参数用于指示第一子焦点图像在第一帧图像中的位置信息;根据第一子焦点图像的参数从第一帧图像中获取第一子焦点图像;根据第一焦点图像的参数和重叠图像的参数,确定第二子焦点图像的参数,第二子焦点图像的参数用于指示第二子焦点图像在第二帧图像中的位置信息;根据第二子焦点图像的参数从第二帧图像中获取第二子焦点图像。
在一种实施方式中,参见图5,图5所示的显示单元503还用于:
若第一焦点图像未存在于重叠图像中,则根据第一焦点图像的参数确定第二焦点图像的参数,第二焦点图像的参数用于指示第二焦点图像在第二帧图像中的位置信息;根据第二焦点图像的参数从第二帧图像中获取第二焦点图像,第二焦点图像在第二帧图像中的相对位置与第一焦点图像在第一帧图像中的相对位置相同;根据变焦倍率对第二焦点图像进行缩放处理,并显示缩放处理后的第二焦点图像。
通过本申请装置实施例,通过获取第一帧图像,并获取第一焦点图像的参数;根据第一焦点图像的参数从第一帧图像中获取第一焦点图像;确定第一帧图像与第二帧图像之间的重叠图像;若第一焦点图像存在于重叠图像中,则根据变焦倍率对第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。若第一焦点图像未存在于重叠图像中,则获取第二焦点图像;根据变焦倍率对第二焦点图像进行缩放处理后显示。即抖动幅度较小时,显示屏中显示的图像不作更新,用户在终端显示屏中看到的图像不会因为抖动发生变化;当抖动幅度较大时,认定用户需要重新确定拍摄对象,则在第二帧图像中重新选取焦点图进行缩放处理后显示在终端显示屏中,有利于提高用户体验。
根据本申请的一个实施例,图1a-图4所示的图像处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本申请的其它实施例中,图像处理装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。
基于上述方法实施例以及装置实施例的描述,本申请实施例还提供一种图像处理装置6。请参见图6,该图像处理装置至少包括通信接口601、处理单元602以及存储器603。其中,通信接口601、处理单元602以及存储器603可通过总线604或其他方式连接。
在本申请实施例中,通信接口可以是收发器、电路、总线、模块或其它类型的通信接口,用于通过传输介质和其它设备进行通信。例如,通信接口601用于装置6中的装置可以和其它设备进行通信。处理单元602利用通信接口601收发数据,并用于实现上述方法实施例的方法。
装置6还可以包括至少一个存储器603,用于存储程序指令和/或数据。存储器603和处理单元602耦合。本申请实施例中的耦合是装置、单元或模块之间的间接耦合或通信连接,可以是电性,机械或其它的形式,用于装置、单元或模块之间的信息交互。处理单元602可能和存储器603协同操作。处理单元602可能执行存储器603中存储的程序指令。至少一个存储器中的至少一个可以包括于处理单元中。
本申请实施例中不限定上述通信接口601、处理单元602以及存储器603之间的具体连接介质。本申请实施例在图6中以存储器603、通信接口602以及通信接口601之间通过总线604连接,总线在图6中以粗线表示,其它部件之间的连接方式,仅是进行示意性说明,并不引以为限。总线可以分为地址总线、数据总线、控制总线等。为便于表示,图6中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
装置6具体是用于第一终端或第二终端的装置时,例如装置6具体是芯片或者芯片系统时,通信接口601所输出或接收的可以是基带信号。装置6具体是第一终端或第二终端时,通信接口601所输出或接收的可以是射频信号。在本申请实施例中,处理单元可以是通用处理单元、数字信号处理单元、专用集成电路、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件,可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理单元可以是微处理单元或者任何常规的处理单元等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件处理单元执行完成,或者用处理单元中的硬件及软件模块组合执行完成。
根据本申请的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算装置上运行能够执行如图1a-图4中所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图5-图6所示的图像处理装置,以及来实现本申请实施例的图像处理方法。计算机程序可以记载于例如计算机可读记录介质上,并通过计算机可读记录介质装载于上述计算装置中,并在其中运行。
基于同一发明构思,本申请实施例中提供的图像处理装置解决问题的原理与有益效果与本申请方法实施例中图像处理装置解决问题的原理和有益效果相似,可以参见方法的实施的原理和有益效果,为简洁描述,在这里不再赘述。
本申请实施例还提供一种计算机可读存储介质,计算机可读存储介质中存储有一条或多条指令,一条或多条指令适于由处理器加载并执行上述方法实施例的图像处理方法。
本申请实施例还提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述方法实施例的图像处理方法。
需要说明的是,对于前述的各个方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某一些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
本申请实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本申请实施例装置中的模块可以根据实际需要进行合并、划分和删减。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,可读存储介质可以包括:闪存盘、只读存储器(Read-Only Memory,ROM)、随机存取器(RandomAccess Memory,RAM)、磁盘或光盘等。
以上所揭露的仅为本申请一种较佳实施例而已,当然不能以此来限定本申请之权利范围,本领域普通技术人员可以理解实现上述实施例的全部或部分流程,并依本申请权利要求所作的等同变化,仍属于发明所涵盖的范围。
Claims (10)
1.一种图像处理方法,其特征在于,应用于拍摄装置,所述方法包括:
获取第一帧图像,并获取第一焦点图像的参数;所述第一帧图像是所述拍摄装置抖动前采集的图像;
根据所述第一焦点图像的参数从所述第一帧图像中获取所述第一焦点图像;
确定所述第一帧图像与第二帧图像之间的重叠图像;
若所述第一焦点图像存在于所述重叠图像中,则根据变焦倍率对所述第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定所述重叠图像的参数;
基于所述第一焦点图像的参数与所述重叠图像的参数,确定所述第一焦点图像存在于所述重叠图像中。
3.根据权利要求2所述的方法,其特征在于,所述确定所述重叠图像的参数,包括:
获取所述拍摄装置采集所述第一帧图像时所在的位置,与采集所述第二帧图像时所在的位置之间的位移信息;
确定所述第一帧图像的参数;
根据所述位移信息与所述第一帧图像的参数确定所述重叠图像的参数。
4.根据权利要求2或3所述的方法,其特征在于,所述第一焦点图像的参数包括所述第一焦点图像的各像素点的坐标值,所述重叠图像的参数包括所述重叠图像的各像素点的坐标值;
所述基于所述第一焦点图像的参数与所述重叠图像的参数,确定所述第一焦点图像存在于所述重叠图像中,包括:
若所述第一焦点图像的各像素点的坐标值均存在于所述重叠图像的所有像素点的坐标值组成的坐标集合内,则确定所述第一焦点图像存在于所述重叠图像中。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
若所述第一焦点图像的部分像素点的坐标值存在于所述坐标集合内,则确定所述第一焦点图像的部分图像存在于所述重叠图像中;
将未存在于所述重叠图像中的所述第一焦点图像的部分图像确定为第一子焦点图像,将存在于所述重叠图像中的所述第一焦点图像的部分图像确定为第二子焦点图像;
将所述第一子焦点图像与所述第二子焦点图像进行组合,得到第三焦点图像;
根据所述变焦倍率对所述第三焦点图像进行缩放处理,并显示缩放处理后的第三焦点图像。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
根据所述第一焦点图像的参数和所述重叠图像的参数,确定所述第一子焦点图像的参数,所述第一子焦点图像的参数用于指示所述第一子焦点图像在所述第一帧图像中的位置信息;
根据所述第一子焦点图像的参数从所述第一帧图像中获取所述第一子焦点图像;
根据所述第一焦点图像的参数和所述重叠图像的参数,确定所述第二子焦点图像的参数,所述第二子焦点图像的参数用于指示所述第二子焦点图像在所述第二帧图像中的位置信息;
根据所述第二子焦点图像的参数从所述第二帧图像中获取所述第二子焦点图像。
7.根据权利要求1~3中任一项所述的方法,其特征在于,所述第一焦点图像的参数用于指示所述第一焦点图像在所述第一帧图像中的位置信息;
所述方法还包括:
若所述第一焦点图像未存在于所述重叠图像中,则根据所述第一焦点图像的参数确定第二焦点图像的参数,所述第二焦点图像的参数用于指示所述第二焦点图像在所述第二帧图像中的位置信息;
根据所述第二焦点图像的参数从所述第二帧图像中获取所述第二焦点图像,所述第二焦点图像在所述第二帧图像中的相对位置与所述第一焦点图像在所述第一帧图像中的相对位置相同;
根据所述变焦倍率对所述第二焦点图像进行缩放处理,并显示缩放处理后的第二焦点图像。
8.一种图像处理装置,其特征在于,所述装置包括:
获取单元,用于获取第一帧图像,并获取第一焦点图像的参数;所述第一帧图像是所述装置抖动前采集的图像;
获取单元,还用于根据所述第一焦点图像的参数从所述第一帧图像中获取所述第一焦点图像;
确定单元,用于确定所述第一帧图像与第二帧图像之间的重叠图像;
显示单元,用于若所述第一焦点图像存在于所述重叠图像中,则根据变焦倍率对所述第一焦点图像进行缩放处理,并显示缩放处理后的第一焦点图像。
9.一种图像处理装置,其特征在于,包括处理器、存储器和通信接口,所述处理器、所述存储器和所述通信接口相互连接,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行如权利要求1至7中任一项所述的图像处理方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有一条或多条指令,所述一条或多条指令适用于由处理器加载并执行如权利要求1至7中任一项所述的图像处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010515810.6A CN111698421B (zh) | 2020-06-09 | 2020-06-09 | 一种图像处理方法、装置及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010515810.6A CN111698421B (zh) | 2020-06-09 | 2020-06-09 | 一种图像处理方法、装置及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111698421A CN111698421A (zh) | 2020-09-22 |
CN111698421B true CN111698421B (zh) | 2021-12-17 |
Family
ID=72479770
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010515810.6A Active CN111698421B (zh) | 2020-06-09 | 2020-06-09 | 一种图像处理方法、装置及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111698421B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104396228A (zh) * | 2012-06-29 | 2015-03-04 | 富士胶片株式会社 | 摄像机及其动作控制方法 |
CN110349163A (zh) * | 2019-07-19 | 2019-10-18 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4181923B2 (ja) * | 2003-05-29 | 2008-11-19 | キヤノン株式会社 | 撮像装置および撮像装置の制御方法 |
US9001222B2 (en) * | 2010-11-11 | 2015-04-07 | Panasonic Intellectual Property Corporation Of America | Image processing device, image processing method, and program for image processing for correcting displacement between pictures obtained by temporally-continuous capturing |
WO2014017174A1 (ja) * | 2012-07-24 | 2014-01-30 | 富士フイルム株式会社 | カメラおよびその動作制御方法 |
US10033926B2 (en) * | 2015-11-06 | 2018-07-24 | Google Llc | Depth camera based image stabilization |
WO2017122810A1 (ja) * | 2016-01-15 | 2017-07-20 | 株式会社モルフォ | 画像処理装置、画像処理方法、画像処理プログラム及び記憶媒体 |
CN110473159B (zh) * | 2019-08-20 | 2022-06-10 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN110536057B (zh) * | 2019-08-30 | 2021-06-08 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN110855883B (zh) * | 2019-11-05 | 2021-07-20 | 浙江大华技术股份有限公司 | 一种图像处理系统、方法、装置设备及存储介质 |
-
2020
- 2020-06-09 CN CN202010515810.6A patent/CN111698421B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104396228A (zh) * | 2012-06-29 | 2015-03-04 | 富士胶片株式会社 | 摄像机及其动作控制方法 |
CN110349163A (zh) * | 2019-07-19 | 2019-10-18 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111698421A (zh) | 2020-09-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9619861B2 (en) | Apparatus and method for improving quality of enlarged image | |
TW201617717A (zh) | 用於穩定及重定框架之方法及系統 | |
US20220301328A1 (en) | Text recognition method and apparatus | |
CN113824876B (zh) | 数字变焦下画面稳定性处理方法、装置、移动终端及介质 | |
CN110021071B (zh) | 一种增强现实应用中的渲染方法、装置及设备 | |
CN115379105B (zh) | 视频拍摄方法、装置、电子设备和存储介质 | |
EP4117276B1 (en) | Image display method and electronic device | |
CN110709813B (zh) | 一种图像显示方法、设备、云台及存储介质 | |
CN113875220A (zh) | 拍摄防抖方法、装置、终端及存储介质 | |
EP3461138B1 (en) | Processing method and terminal | |
CN114338874A (zh) | 电子设备的图像显示方法、图像处理电路和电子设备 | |
CN114390206A (zh) | 拍摄方法、装置和电子设备 | |
CN114531539B (zh) | 拍摄方法及电子设备 | |
CN113891018A (zh) | 拍摄方法、装置及电子设备 | |
US20200404139A1 (en) | Imaging control device, imaging apparatus, imaging control method, and imaging control program | |
CN111698421B (zh) | 一种图像处理方法、装置及计算机可读存储介质 | |
US10701286B2 (en) | Image processing device, image processing system, and non-transitory storage medium | |
CN112328193A (zh) | 多终端屏幕组合方法、装置、设备和计算机存储介质 | |
CN100403767C (zh) | 移动终端摄像装置的图像补偿系统及其方法 | |
CN113393391B (zh) | 图像增强方法、图像增强装置、电子设备和存储介质 | |
CN112911130A (zh) | 辅助取景方法、装置、终端和存储介质 | |
CN113592734B (zh) | 图像处理方法、装置和电子设备 | |
EP4030748A1 (en) | Electronic apparatus having optical zoom camera, camera optical zoom method, unit, and memory | |
CN111654627B (zh) | 一种数字变焦方法、装置、设备及存储介质 | |
CN114449172B (zh) | 拍摄方法、装置和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |