具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
另外,在本申请实施例中,“可选地”或者“示例性地”等词用于表示作例子、例证或说明。本发明实施例中被描述为“可选地”或者“示例性地”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“可选地”或者“示例性地”等词旨在以具体方式呈现相关概念。
如图1所示,整个航拍相机的处理流程为,航拍相机使用高清图像传感器采集到图像后,将该图像输入至图像处理单元,经由图像处理单元对图像进行缩小处理,进而再分别传输至拍照单元和录像单元,以呈现图像或视频。
但由于每个图像传感器的出图像总性能A是固定的,这一性能限制了图像的分辨率(图像宽为w,高为h)和帧率f,如公式(1)所示:
A=w×h×f (1)
若采集的图像使用最大的分辨率,即w和h为最大,那么由公式(1)可知,该图像的帧率f就会比较低,这种分辨率和帧率比较适合拍照的场景。若需要提高帧率,就需要降低图像的分辨率。
现有的降低图像的分辨率的方式有两种,如图2所示,一种为对图像进行裁剪,另一种为按倍数对图像进行缩放。
在对图像进行裁剪时,由于裁剪只保留了图像的中间部分,这样会降低图像的视场角,如果图像的帧率不需要提升过多,且裁剪后的视场角在使用允许范围内,那么这种处理方式可以被认为是不损失图像原始画质的。
反之,若用户希望帧率大幅度提升,且不希望以裁剪的方式降低图像视场角,那么可以选用按倍数对图像进行缩放,例如,图像高和宽都缩小了1/2或1/4。
这一实现方式即为将多个像素点合并成同一个点输出,如图3所示,小圆点为原始图像的像素点,将图像的高和宽都缩小到1/2后,四个像素点合并成了一个像素点,即方框为按倍数对图像缩小后的像素点。
但由于这种处理方式,没有经过专用的缩小算法进行滤波处理,这样会引入相对粗糙的边缘锯齿问题。所以只能在要求低照度效果好、或这高帧率输出的场景下可以采用。
实施例一
基于上述原因,本发明实施例提供了一种图像处理方法,可以应用于航拍相机使用场景下,具体流程如图4所示,包括如下步骤:
S401、接收图像模式切换指令。
若当前的图像显示模式不能满足用户的使用需求,例如,图像分辨率过高,而终端不能支持这一高分辨率的显示模式,或者,用户需要以低分辨率的方式在终端上存储更多的图像、视频等。则用户会通过显示终端向航拍相机发送图像模式切换指令,以指示航拍相机将当前图像模式切换为目标图像模式。
可选地,该图像模式切换指令可以携带有目标图像模式。
需要说明的是,用户通过显示终端向航拍相机发送图像模式切换指令可以采用现有技术中的任意实现方式,本发明实施例对此不作限定。
S402、根据目标图像模式对采集的图像进行处理。
示例性地,当目标图像模式为二次缩小图像分辨率模式时,本发明提供了一种根据目标图像模式对采集的图像进行处理的实现方式为,降低图像分辨率,并根据目标图像模式与第一图像模式之间的缩放关系,对图像的像素点亮度进行处理。
其中,二次缩小图像分辨率模式可以为降低图像分辨率后,再次缩小图像分辨率,第一图像模式为降低分辨率后的图像模式。
其中,上述降低图像分辨率可以为剪裁图像,和/或,按倍数缩放图像分辨率。
可选地,目标图像模式也可以为剪裁图像,和/或,按倍数缩放图像分辨率。
当然,本领域技术人员可以理解的是,当目标图像模式为剪裁图像,和/或,按倍数缩放图像分辨率,可以采用对应的处理方法对图像分辨率进行处理。
更为具体地,上述根据目标图像模式与第一图像模式之间的缩放关系,对图像的像素点亮度进行处理,可以为根据目标图像模式与第一图像模式之间的缩放关系,基于第一图像模式的图像像素点亮度重新确定目标图像模式的图像像素点亮度。
可选地,本发明实施例提供了一种根据目标图像模式与第一图像模式之间的缩放关系,基于第一图像模式的图像像素点亮度重新确定目标图像模式的图像像素点亮度的实现方法为:
若目标图像模式与第一图像模式之间的缩放关系满足第一条件时,说明目标图像模式分辨率中的宽度缩小倍数较大,目标图像模式可以水平方向的像素为准。
其中,如图5所示,假设第一图像模式的图像宽度和高度分别为w、h,像素点(x,y)的亮度为I(x,y),目标模式的图像宽度和高度分别为W、H,像素点(X,Y)的亮度为I(X,Y),则按照等比例缩放得到公式(2)、(3):
进一步地,若第一图像模式的图像像素点亮度满足第一像素条件,表明像素点(x,y)周边不平衡,那么将目标图像模式的图像像素点亮度确定为I(X,Y)=I(xW/w,yH/h);
若第一图像模式的图像像素点亮度满足第二像素条件,表示像素点(x,y)周边是圆滑的,那么将目标图像模式的图像像素点亮度确定为
其中,第一像素条件为|I(x-1,y)-I(x+1,y)|>T,第二像素条件为|I(x-1,y)-I(x+1,y)|≤T,T为门限值。
可选地,本发明实施例提供了又一种根据目标图像模式与第一图像模式之间的缩放关系,基于第一图像模式的图像像素点亮度重新确定目标图像模式的图像像素点亮度的实现方法为:
若目标图像模式与第一图像模式之间的缩放关系满足第二条件时,说明目标图像模式分辨率中的高度缩小倍数较大,目标图像模式可以垂直方向的像素为准。
进一步地,若第一图像模式的图像像素点亮度满足第三像素条件,表明像素点(x,y)周边不平衡,那么将目标图像模式的图像像素点亮度确定为I(X,Y)=I(xW/w,yH/h);
若第一图像模式的图像像素点亮度满足第四像素条件,表示像素点(x,y)周边是圆滑的,那么将目标图像模式的图像像素点亮度确定为
其中,第二条件为
第三像素条件为|I(x,y-1)-I(x,y+1)|>T,第四像素条件为|I(x,y-1)-I(x,y+1)|≤T,T为门限值。
可选地,本发明实施例提供了又一种根据目标图像模式与第一图像模式之间的缩放关系,基于第一图像模式的图像像素点亮度重新确定目标图像模式的图像像素点亮度的实现方法为:
若目标图像模式与第一图像模式之间的缩放关系不满足第一条件和第二条件,表明目标图像模式分辨率中的高、宽缩放倍数相差不大,目标图像模式可以斜边方向的像素为准。
进一步地,若第一图像模式的图像像素点亮度满足第五像素条件,则将目标图像模式的图像像素点亮度确定为I(X,Y)=I(xW/w,yH/h);
若第一图像模式的图像像素满足第六像素条件,则将目标图像模式的图像像素点亮度确定为
其中,第五像素条件为|I(x-1,y-1)-I(x+1,y+1)|>T或|I(x-1,y+1)-I(x+1,y-1)|>T,第六像素条件为|I(x-1,y-1)-I(x+1,y+1)|≤T且|I(x-1,y+1)-I(x+1,y-1)|≤T,T为门限值。
通过上述的图像处理方法,可以在对图像进行缩小时,能够较好的保留图像细节,这样在一些帧率需求较高的场景下,若用户不想降低图像视场角,同时,目标图像模式的分辨率也不是原始图像分辨率的整数缩放倍数。那么,可以在图像采集端提高图像的帧率,同时按倍数缩放图像分辨率,进而采用上述图像处理方法,将图像分辨率处理为目标图像模式的分辨率。
另外,通过上述实施例可以看出,目标图像模式可以有多种实现方式,例如:
(1)、采用最大分辨率;
(2)、剪裁图像,提升帧率;
(3)、按倍数缩放图像分辨率(如,缩小分辨率至1/2或1/4),提升帧率;
(4)、裁剪图像,提升帧率,再次缩小图像分辨率;
(5)、按倍数缩放图像分辨率,提升帧率,再次缩小图像分辨率;
(6)、剪裁图像,按倍数缩放图像分辨率,提升帧率;
(7)、剪裁图像,按倍数缩放图像分辨率,提升帧率,再次缩小图像分辨率。
示例性地,上述实现方式可以以具体的数字进行说明,假设原始采集图像的分辨率为80000*6000,帧率为19fps,则上述实现方式如表1所示。
表1
本发明实施例提供了一种图像处理方法,具体为接收图像模式切换指令,图像模式切换指令用于指示将当前图像模式切换为目标图像模式,且图像模式切换指令携带目标图像模式,根据目标图像模式对采集的图像进行处理。这样可以基于图像模式切换指令中携带的目标图像模式灵活地对图像进行处理,从而满足不同场景下的图像显示需求。
实施例二
本发明实施例提供了一种图像处理装置,如图6所示,该装置包括接收模块601、处理模块602。
其中,接收模块601,用于接收图像模式切换指令;
其中,该图像模式切换指令用于指示将当前图像模式切换为目标图像模式,且图像模式切换指令中携带有目标图像模式;
处理模块602,用于根据目标图像模式对采集的图像进行处理。
进一步地,当目标图像模式为二次缩小图像分辨率模式时,处理模块602根据目标图像模式对采集的图像进行处理,包括:
降低图像分辨率,并根据目标图像模式与第一图像模式之间的缩放关系,对图像的像素点亮度进行处理;
其中,二次缩小图像分辨率模式为降低图像分辨率后,再次缩小图像分辨率,第一图像模式为降低分辨率后的图像模式。
其中,降低图像分辨率为剪裁图像,和/或,按倍数缩放图像分辨率。
进一步地,根据目标图像模式与第一图像模式之间的缩放关系,对图像的像素点亮度进行处理,包括:
根据目标图像模式与第一图像模式之间的缩放关系,基于第一图像模式的图像像素点亮度重新确定目标图像模式的图像像素点亮度。
可选地,本发明实施例提供一种根据目标图像模式与第一图像模式之间的缩放关系,基于第一图像模式的图像像素点亮度重新确定目标图像模式的图像像素点亮度,包括:
若目标图像模式与第一图像模式之间的缩放关系满足第一条件,且第一图像模式的图像像素点亮度满足第一像素条件,则将目标图像模式的图像像素点亮度确定为I(X,Y)=I(xW/w,yH/h);
若目标图像模式与第一图像模式之间的缩放关系满足第一条件,且第一图像模式的图像像素点亮度满足第二像素条件,则将目标图像模式的图像像素点亮度确定为
其中,第一条件为
w为第一图像模式的图像宽度,h为第一图像模式的图像高度,W为目标图像模式的图像宽度,H为目标图像模式的图像高度;
第一像素条件为|I(x-1,y)-I(x+1,y)|>T,第二像素条件为|I(x-1,y)-I(x+1,y)|≤T,T为门限值,x和y为第一图像模式的图像像素点坐标。
可选地,本发明实施例提供又一种根据目标图像模式与第一图像模式之间的缩放关系,基于第一图像模式的图像像素点亮度重新确定目标图像模式的图像像素点亮度,包括:
若目标图像模式与第一图像模式之间的缩放关系满足第二条件,且第一图像模式的图像像素点亮度满足第三像素条件,则将目标图像模式的图像像素点亮度确定为I(X,Y)=I(xW/w,yH/h);
若目标图像模式与第一图像模式之间的缩放关系满足第二条件,且第一图像模式的图像像素点亮度满足第四像素条件,则将目标图像模式的图像像素点亮度确定为
其中,第二条件为
w为第一图像模式的图像宽度,h为第一图像模式的图像高度,W为目标图像模式的图像宽度,H为目标图像模式的图像高度;
第三像素条件为|I(x,y-1)-I(x,y+1)|>T,第四像素条件为|I(x,y-1)-I(x,y+1)|≤T,T为门限值,x和y为第一图像模式的图像像素点坐标。
可选地,本发明实施例提供又一种根据目标图像模式与第一图像模式之间的缩放关系,基于第一图像模式的图像像素点亮度重新确定目标图像模式的图像像素点亮度,包括:
若目标图像模式与第一图像模式之间的缩放关系不满足第一条件和第二条件,且第一图像模式的图像像素点亮度满足第五像素条件,则将目标图像模式的图像像素点亮度确定为I(X,Y)=I(xW/w,yH/h);
若目标图像模式与第一图像模式之间的缩放关系不满足第一条件和第二条件,且第一图像模式的图像像素满足第六像素条件,则将目标图像模式的图像像素点亮度确定为
其中,第一条件为
第二条件为
w为第一图像模式的图像宽度,h为第一图像模式的图像高度,W为目标图像模式的图像宽度,H为目标图像模式的图像高度;
第五像素条件为|I(x-1,y-1)-I(x+1,y+1)|>T或|I(x-1,y+1)-I(x+1,y-1)|>T,第六像素条件为|I(x-1,y-1)-I(x+1,y+1)|≤T且|I(x-1,y+1)-I(x+1,y-1)|≤T,T为门限值,x和y为第一图像模式的图像像素点坐标。
本发明实施例所提供的图像处理装置可执行本发明实施例一所提供的图像处理方法,具备执行方法相应的功能模块和有益效果。
实施例三
图7为本发明实施例7提供的一种航拍相机的结构示意图,如图7所示,该设备包括处理器701、存储器702、输入装置703和输出装置704;设备中处理器701的数量可以是一个或多个,图7中以一个处理器701为例;设备中的处理器701、存储器702、输入装置703和输出装置704可以通过总线或其他方式连接,图7中以通过总线连接为例。
存储器702作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例一中的图像处理方法对应的程序指令/模块(例如,图像处理装置中的接收模块601、处理模块602)。处理器701通过运行存储在存储器702中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的图像处理方法。
存储器702可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储器702可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器702可进一步包括相对于处理器701远程设置的存储器,这些远程存储器可以通过网络连接至设备/终端/服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置703可用于接收输入的数字或字符信息,以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置704可包括显示屏等显示设备。
实施例四
本发明实施例四还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种图像处理方法,该方法包括:
接收图像模式切换指令,图像模式切换指令用于指示将当前图像模式切换为目标图像模式,且图像模式切换指令携带目标图像模式;
根据目标图像模式对采集的图像进行处理。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的图像处理方法中的相关操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述图像处理装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。