CN113284057A - 图像校正方法、装置及电子设备 - Google Patents
图像校正方法、装置及电子设备 Download PDFInfo
- Publication number
- CN113284057A CN113284057A CN202110385200.3A CN202110385200A CN113284057A CN 113284057 A CN113284057 A CN 113284057A CN 202110385200 A CN202110385200 A CN 202110385200A CN 113284057 A CN113284057 A CN 113284057A
- Authority
- CN
- China
- Prior art keywords
- image
- grid
- interpolation
- target
- corrected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 91
- 238000003702 image correction Methods 0.000 title claims abstract description 81
- 238000012937 correction Methods 0.000 claims abstract description 48
- 238000012545 processing Methods 0.000 claims abstract description 13
- 238000004891 communication Methods 0.000 claims description 7
- 230000000694 effects Effects 0.000 abstract description 27
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 7
- 239000011159 matrix material Substances 0.000 description 6
- 239000000872 buffer Substances 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 2
- 230000032823 cell division Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本申请公开了一种图像校正方法、装置及电子设备,属于图像处理技术领域,能够兼顾图像校正的校正效率和校正效果。图像校正方法包括:将插值模板划分为M个网格单元,M个网格单元包括至少两种尺寸的网格单元,M为大于1的整数;对于M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置;根据插值点的位置以及待校正图像,得到目标图像;其中,插值模板的形状和/或尺寸与目标图像相同。本申请可以应用于对例如广角镜头、长焦镜头或鱼眼镜头等多种镜头拍摄的图像进行畸变校正的场景。
Description
技术领域
本申请属于图像处理技术领域,具体涉及一种图像校正方法、装置及电子设备。
背景技术
随着图像采集技术的不断发展,相机、智能手机等具有图像采集功能的电子设备得到了广泛地应用。图像采集设备采用的镜头也日趋多样化和复杂化。
例如广角镜头、长焦镜头或鱼眼镜头等的镜头能够改变图像的采集视角以及采集效果,但上述镜头采集到的图像可能会发生几何变形(即图像畸变)。在相关技术中,可以通过像素点坐标转换和图像插值技术对图像畸变进行校正和还原。
然而,由于待校正图像的不同图像区域通常可能具有不同程度的畸变,而相关技术中对图像畸变进行校正和还原时,对待校正图像中的每个图像区域均采用相同的方式进行校正,因此相关技术中的图像校正方法难以兼顾图像校正的校正效率和校正效果。
申请内容
本申请实施例的目的是提供一种图像校正方法、装置及电子设备,能够解决相关技术中图像校正方法难以兼顾图像校正的校正效率和校正效果的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种图像校正方法方法,该方法包括:将插值模板划分为M个网格单元,M个网格单元包括至少两种尺寸的网格单元,M为大于1的整数;对于M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置;根据插值点的位置以及待校正图像,得到目标图像;其中,插值模板的形状和/或尺寸与目标图像相同。
第二方面,本申请实施例提供了一种图像校正装置,装置包括:划分模块,用于将插值模板划分为M个网格单元,M个网格单元包括至少两种尺寸的网格单元,M为大于1的整数;确定模块,用于对于划分模块划分的M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置;校正模块,用于根据确定模块确定的插值点的位置以及待校正图像,得到目标图像;其中,插值模板的形状和/或尺寸与目标图像相同。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序或指令,程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,可读存储介质上存储程序或指令,程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,芯片包括处理器和通信接口,通信接口和处理器耦合,处理器用于运行程序或指令,实现如第一方面所述的方法。
本申请实施例中,首先将插值模板划分为M个网格单元。由于M个网格单元包括至少两种尺寸的网格单元,因此本申请实施例提供的图像校正方法可在后续的校正步骤中对不同尺寸的网格单元分别进行校正。进而,本申请实施例提供的图像校正方法对于M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置,然后再根据该插值点的位置以及待校正图像,得到目标图像。如此,本申请实施例能够分别对不同尺寸的网格单元进行校正,以将待校正图像校正为目标图像。由于在图像校正过程中,采用尺寸相对较大的网格单元,可保证校正处理的效率较高;采用尺寸相对较小的网格单元,可保证校正处理的效果较好。因此,本申请实施例提供的图像校正方法通过划分包括至少两种尺寸的M个网格单元,能够兼顾图像校正的校正效率和校正效果,从而利用较少的功耗和资源,获得较为理想的校正效果。
附图说明
图1是相关技术中网格单元划分方式示意图;
图2是本申请实施例提供的待校正图像的示意图之一;
图3是本申请实施例提供的待校正图像的示意图之二;
图4是本申请实施例提供的目标图像的示意图;
图5是本申请实施例提供的图像校正方法的步骤流程图之一;
图6是本申请实施例提供的图像区域划分方式示意图之一;
图7是本申请实施例提供的网格单元划分方式示意图之二;
图8是本申请实施例提供的确定一个网格单元中的插值点的位置的示意图;
图9是本申请实施例提供的插值点的位置示意图;
图10是本申请实施例提供的图像校正装置的结构示意图之一;
图11是本申请实施例提供的图像校正装置的结构示意图之二;
图12是本申请实施例提供的电子设备的结构示意图;
图13是本申请实施例提供的电子设备的硬件示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获取的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的图像校正方法、装置及电子设备进行详细地说明。
随着图像采集技术的不断发展,照相机、智能手机等具有图像采集功能的电子设备得到了广泛地应用。大尺寸镜头(即摄像头)、广角镜头、长焦镜头,以及鱼眼镜头等镜头能够改变图像的采集视角,有助于提高电子设备的图像采集效果。然而,上述镜头采集到的图像可能会发生几何变形(即图像畸变)。例如,真实场景中目标物体的线条原本为笔直的,但在上述镜头下,该线条由于发生图像畸变会变得弯曲,导致图像失真。
为了改善上述镜头采集到的图像存在的失真现象,电子设备可以通过图像校正技术,对畸变的待校正图像(即输入图像)进行校正。相关技术中的图像校正方法可以将插值模板划分为网格单元(grid cell),进而利用畸变查找表进行像素点坐标转换。最后根据像素点坐标转换的结果,利用图像插值技术实现图像校正。
在进行像素点坐标转换时,由于畸变查找表能够表示待校正图像和目标图像(即校正后的图像,也即输出图像)在网格单元的标定点(即位于网格单元顶点的像素点)的映射关系,因此,相关技术中的图像校正方法可以根据畸变查找表将待校正图像在网格单元顶点位置的坐标转换为目标图像在网格单元顶点位置的坐标。由此,在进行图像插值时,相关技术中的图像校正方法可以根据目标图像在网格单元顶点位置的坐标对网格单元内部的插值点(即位于网格单元边部或内部的像素点)进行插值,以确定插值点在待校正图像中的位置坐标。最后,相关技术中的图像校正方法可以根据插值点的位置坐标,将待校正图像校正为目标图像。
下面以如图1所示的分辨率为4096×3072的待校正图像为例,对相关技术中的图像校正方法进行网格划分的方式进行举例说明。相关技术中的图像校正方法可以在图1的校正后图像中沿横向设置17个标定点,并可以在该校正后图像中沿纵向设置13个标定点。由此,该校正后图像可以具有221个标定点。即整幅校正后图像可以被划分为192个网格单元,每个网格单元中需要插值的像素点数量可以为256×256。
通过上述网格划分方式可知,相关技术中的图像校正方法通常将校正后图像划分为固定的网格单元。其中,固定的网格单元是指尺寸固定的网格单元。然而,对于大尺寸镜头(即摄像头)、广角镜头、长焦镜头,以及鱼眼镜头等上述镜头采集到的待校正图像而言,不同镜头采集到的待校正图像通常可能具有不同程度的畸变,待校正图像的不同图像区域通常也可能具有不同程度的畸变。由于相关技术中的图像校正方法将校正后图像划分为固定的网格单元,因此相关技术中的图像校正方法对待校正图像进行校正和还原时,对待校正图像中的每个图像区域均采用相同的方式进行校正。上述校正方式可能导致电子设备对畸变程度小的图像区域花费较大功耗和较多资源进行校正,还可能导致电子设备为了节省功耗和资源,而无法保证畸变程度大的图像区域的校正效果。由此可知,相关技术中的图像校正方法难以兼顾图像校正的校正效率和校正效果。
为了解决上述技术问题,本申请实施例提供了一种图像校正方法,该方法的执行主体可以为图像校正装置,该图像校正装置可以为电子设备,也可以为电子设备中能够实现该图像校正方法的功能模块和/或功能主体,具体可以根据实际使用需求确定,本申请实施例不作限定。为了更加清楚地描述本申请实施例提供的图像校正方法,下面方法实施例中以图像校正装置为电子设备,即图像校正方法的执行主体为电子设备为例进行示例性地说明。
本申请实施例的电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等设备,或者该电子设备还可以为其他类型的电子设备,本申请实施例不作限定。
下面以各个实施例为例,对本申请实施例提供的图像校正方法进行详细的说明。
本申请实施例提供了一种图像校正方法,该方法可以将如图2或图3所示的待校正图像校正为如图4所示的目标图像。该方法的目的在于将待校正图像校正为目标图像。
可选的,本申请实施例中,待校正图像可以为全部图像区域发生畸变的待校正图像,还可以为局部图像区域发生畸变的待校正图像。具体可以根据实际使用需求确定,本申请实施例不作限定。
可选的,本申请实施例中,待校正图像可以为静态的待校正图像,还可以为动态的待校正图像。具体可以根据实际使用需求确定,本申请实施例不作限定。
可选的,本申请实施例中,待校正图像的格式可以为以下之一:bmp格式、jpg格式、png格式、tif格式、gif格式、pcx格式、tga格式、exif格式、fpx格式、svg格式、psd格式、cdr格式、pcd格式、dxf格式、ufo格式、eps格式、raw格式、wmf格式。具体可以根据实际使用需求确定,本申请实施例不作限定。
如图5所示,该方法可以包括下述的S101-S103:
S101、电子设备将插值模板划分为M个网格单元。
本申请实施例中,插值模板的形状和/或尺寸与目标图像相同。
可以理解,目标图像为矫正后的图像。
本申请实施例中,M可以为大于1的整数。具体可以根据实际采用的网格单元和图像分辨率确定,本申请实施例不作限定。
可以理解,电子设备划分出的M个网格单元是虚拟的网格单元。电子设备划分M个网格单元的目的是:以各个网格单元为单位,逐步对待校正图像进行校正,得到目标图像。
可以理解,电子设备对该M个网格单元的划分标准(比如:所划分网格单元的数量、尺寸、形状等)可以根据插值模板的形状和/或尺寸进行确定。
可选的,本申请实施例中,电子设备可以按插值模板的形状以及尺寸中的一者或两者,划分M个网格单元。比如,对于形状为长方形的插值模板,电子设备可以划分M个矩阵布置并分别为长方形的网格单元;对于形状为正方形的插值模板,电子设备可以划分M个矩阵布置并分别为正方形的网格单元。再比如,对于尺寸较大(即分辨率较高)的,电子设备可以划分数量较多的网格单元;对于尺寸较小(即分辨率较低)的目标图像,电子设备可以划分数量较少的网格单元。
可选的,本申请实施例中,上述M个网格单元的排列方式可以为矩阵方式排列。比如,假设M为64,那么64个网格单元可以8×8的方式排列。再比如,假设M为120,那么120个网格单元可以10×12的方式排列。
可选的,本申请实施例中,M个网格单元的具体网格数量和具体网格排列方式可以根据待校正图像的尺寸以及横纵比确定,本申请实施例不作限定。
其中,上述M个网格单元包括至少两种尺寸的网格单元,即上述M个网格单元中的至少两个网格单元具有不同的尺寸。可以理解,上述M个网格单元可以包括一部分尺寸相同的网格单元,并包括另一部分与上述部分网格单元的尺寸不同的网格单元
该尺寸是指网格单元的大小尺寸,比如网格单元的面积。对于矩形的网格单元而言,该尺寸是指网格单元的长度和宽度的乘积。相应地,至少两个网格单元具有不同的尺寸是指至少两个网格单元具有不同的网格单元面积。
可选的,本申请实施例中,网格单元的长度或和宽度可以是{4,8,16,32,64}中任意数的组合。
可选的,本申请实施例中,网格单元最小的尺寸可以是4*4,网格单元最大的尺寸可以是64*64。
示例性地,如图6所示,电子设备可以将目标图像划分为208个具有两种不同尺寸的网格单元。其中,一部分网格单元10的尺寸大于其余部分网格单元20的尺寸。
本申请实施例中,电子设备按目标图像的形状和/或尺寸划分包括至少两种尺寸的M个网格单元。由于M个网格单元被划分为包括至少两种尺寸的网格单元,因此本申请实施例的电子设备对可在后续的校正步骤中对不同尺寸的网格单元分别进行校正。图像校正的效率和效果受到网格单元的尺寸的影响。如果按目标图像的形状和/或尺寸划分出尺寸较大的网格单元,则电子设备的网格划分方式较为稀疏,稀疏的划分方式能够适用于对内容较为单一的图像,或位于中心区域的图像,或畸变程度较小的图像进行校正,并且当电子设备采用稀疏的划分方式,其仅需要相对较低的硬件资源和功耗,即可完成图像校正。如果按目标图像的形状和/或尺寸划分出尺寸较小的网格单元,则电子设备的网格划分方式较为密集,密集的划分方式能够适用于对内容较为复杂的图像,或位于边缘区域的图像,或畸变程度较大的图像进行校正,并获得较好的校正效果。然而,当电子设备采用密集的划分方式,其需要相对较高的硬件资源和功耗,才能完成图像校正。本申请实施例的电子设备按目标图像的形状和/或尺寸划分M个网格单元,并且M个网格单元包括至少两种尺寸的网格单元。由于M个网格单元包括至少两种尺寸的网格单元,因此本申请实施例的电子设备能够兼顾图像校正的校正效率和校正效果,利用较少的功耗和资源,获得较为理想的校正效果。
可选的,本申请实施例中,在电子设备按目标图像的形状和/或尺寸划分M个网格单元时,电子设备可以先按目标图像的形状和/或尺寸划分N个图像区域,并在划分N个图像区域之后,可以分别对N个图像区域中的每个图像区域再进行划分,从而以将目标图像划分为M个网格单元。
可选的,本申请实施例中,电子设备对N个图像区域中的每个图像区域再进行划分时,可以按照每个图像区域对应的网格单元尺寸,将该图像区域划分为至少一个网格单元。
可选的,本申请实施例中,上述S101具体可以通过下述的S101a和S101b实现。
S101a、电子设备按目标图像的形状和/或尺寸划分N个图像区域。
其中,N为大于1的整数。
可选的,本申请实施例中,N的数量可以为4个,或者6个,或者9个。具体可以根据实际使用需求确定,本申请实施例不作限定。
可选的,本申请实施例中,N个图像区域的排列方式可以为矩阵排列。图7中的P表示矩阵排列的N个图像区域中每横行上图像区域的数量,图7中的Q表示矩阵排列的N个图像区域中每纵列上图像区域的数量。如图7所示,电子设备可以对小于或等于9个的N个网格单元以1×Q的方式排列(如图7中的(a)所示),或者电子设备可以对小于或等于9个的N个网格单元以P×1的方式排列(如图7中的(b)所示),或者电子设备可以对4个网格单元以2×2的方式排列(如图7中的(c)所示),或者电子设备可以对6个网格单元以3×2的方式排列(如图7中的(d)所示),或者电子设备可以对8个网格单元以2×4的方式排列(如图7中的(e)所示),或者电子设备可以对9个网格单元以3×3的方式排列(如图7中的(f)所示)。具体可以根据实际使用需求确定,本申请实施例不作限定。
可选的,本申请实施例中,上述N个图像区域的总面积可以小于或等于目标图像的总面积。
可选的,本申请实施例中,上述N个图像区域组成的整体形状可以与目标图像的形状相同。
可选的,本申请实施例中,上述N个图像区域中每个图像区域的尺寸或形状可以相同,也可以不同。本申请实施例不作限定。例如,上述N个图像区域中每个图像区域的形状可以为长方形,还可以为正方形。
本申请实施例中,电子设备对N个图像区域中的每个图像区域再进行划分时均可以采用如下S101b所示的方法,从而可以划分M个网格单元。下面具体以N个图像区域中的一个图像区域为例对电子设备将图像区域划分为网格单元的方法进行示例性地说明。
S101b、电子设备按照一个图像区域对应的网格单元尺寸,将该图像区域划分为至少一个网格单元。
可以理解,本申请实施例中,电子设备将N个图像区域中的每个图像区域均划分为网格单元之后,即可以划分M个网格单元。
示例性地,电子设备可以按目标图像的形状和/或尺寸划分2个图像区域,并且电子设备可以按照其中一个图像区域对应的网格单元尺寸,将该一个图像区域划分为20个网格单元;电子设备还可以按照其中另一个图像区域对应的网格单元尺寸,将该另一个图像区域划分40个网格单元。由此,电子设备在划分2个图像区域后,可以按照每个图像区域对应的网格单元尺寸,再对每个图像区域分别进行网格单元划分,从而以按目标图像的形状和/或尺寸划分为60个网格单元。
可以理解,本申请实施例中,N个图像区域中的至少两个图像区域可以对应不同的网格单元尺寸。例如,不同图像区域可以对应不同的网格单元尺寸。
可以理解,本申请实施例中,N个图像区域中的全部图像区域可以对应各自互不相同的网格单元尺寸,或者N个图像区域中的一部分图像区域可以对应相同的网格单元尺寸,另一部分图像区域可以对应与该一部分图像区域不同的网格单元尺寸。
示例性地,如图6所示,电子设备可以按目标图像的形状和/或尺寸划分包括A图像区域(包括如图6中的10所示的网格单元)和B图像区域(包括如图6中的20所示的网格单元)的两个图像区域。假设,A图像区域对应的网格单元尺寸为4×4,B图像区域对应的网格单元尺寸为2×2,那么电子设备可以按照A图像区域对应的网格单元尺寸,将A图像区域划分为16个网格单元10,并按照B图像区域对应的网格单元尺寸,将B图像区域划分为192个网格单元20。由此,电子设备可以划分208个网格单元。
本申请实施例中,电子设备按目标图像的形状和/或尺寸划分N个图像区域,并且N为大于1的整数。由此,电子设备能够对每个图像区域,分别按照与该图像区域对应的网格单元尺寸,对该图像区域进行网格单元划分。由于N个图像区域中的至少两个图像区域对应不同的网格单元尺寸,因此,电子设备能够对不同图像区域利用不同尺寸的网格单元进行校正,例如,对一些图像区域利用较大尺寸的网格单元进行校正(可以保证校正效率),对一些图像区域利用较小尺寸的网格单元进行校正(可以保证校正效果)。从而,本申请实施例的电子设备能够进一步对网格单元进行合理划分,以进一步达到兼顾图像校正的校正效率和校正效果的目的。
可选的,本申请实施例中,上述N个图像区域中的第一图像区域对应的网格单元尺寸大于N个图像区域中的第二图像区域对应的网格单元尺寸。换言之,位于第一图像区域中的网格单元的面积大于位于第二图像区域中的网格单元的面积。
可以理解,本申请实施例中,上述N个图像区域可以包括第一图像区域和第二图像区域,还可以包括除第一图像区域和第二图像区域之外的第三图像区域和/或第四图像区域等其他图像区域。
可以理解,本申请实施例中,上述第一图像区域和第二图像区域中分别可以包括多个网格单元。其中,第一图像区域中多个网格单元的尺寸可以相同,亦可不同;第二图像区域中多个网格单元的尺寸可以相同,亦可不同。
需要说明的是,本申请实施例中,上述第一图像区域对应的网格单元尺寸大于第二图像区域对应的网格单元尺寸可以理解为:第一图像区域对应的每个网格单元的尺寸均大于第二图像区域对应的每个网格单元的尺寸。
可以理解,本申请实施例中,上述第一图像区域对应的网格单元的形状和第二图像区域对应的网格单元的形状可以相同,也可以不同。
其中,上述第一图像区域可以为处于目标图像中心区域的图像区域,第二图像区域可以为处于目标图像边缘区域的图像区域;或者,第一图像区域的图像畸变程度可以小于第二图像区域的图像畸变程度;或者,第一图像区域的图像重要程度可以小于第二图像区域的图像重要程度。
可以理解,电子设备划分N个图像区域时,可以按照图像区域在目标图像中所处的位置划分,也可以按照图像区域的图像畸变程度划分,还可以按照图像区域的图像重要程度划分,具体可以根据实际使用需求确定,本申请实施例不作限定。
一种可能的实现方式中,当电子设备按照图像区域在目标图像中所处的位置划分时,电子设备可以将位于目标图像中心区域的图像区域划分为第一图像区域,将位于目标图像边缘区域的图像区域划分为第二图像区域。
可以理解,本申请实施例的目标图像中心区域是指位于插值模板中部位置的区域,本申请实施例的插值模板边缘区域是指位于插值模板边缘位置的区域。
示例性地,如图6所示,电子设备可以将所述插值模板划分为包括A图像区域(包括如图6中的10所示的网格单元)和B图像区域(包括如图6中的20所示的网格单元)的两个图像区域。其中,A图像区域即为插值模板的中心区域,B图像区域即为插值模板的边缘区域。
可以理解,由于通常情况下,位于插值模板中心区域的图像区域的畸变程度较小,位于插值模板边缘区域的图像区域的畸变程度较大,因此,插值模板中心区域的图像区域对应的网格单元尺寸可以大于插值模板边缘区域的图像区域对应的网格单元尺寸。即上述第一图像区域对应的网格单元尺寸大于上述第二图像区域对应的网格单元尺寸。
示例性地,如图6所示,网格单元10的尺寸为4×4,网格单元20的尺寸为2×2。
另一种可能的实现方式中,当电子设备按照图像区域的图像畸变程度划分时,电子设备可以将图像畸变程度小的图像区域划分为第一图像区域,将图像畸变程度大的图像区域划分为第二图像区域。
其中,本申请实施例中的图像畸变程度可以是目标图像在被校正前发生畸变的畸变量。
可选的,本申请实施例中,第一种实现方式为,图像畸变程度可以通过图像畸变程度系数进行衡量。比如,将第一图像区域具有的第一图像畸变程度系数和第二图像区域具有的第二图像畸变程度系数进行大小比较,当第一图像畸变程度系数小于第二图像畸变程度系数时,可以判定第一图像区域的图像畸变程度小于第二图像区域的图像畸变程度。
第二种实现方式为,图像畸变程度可以通过将图像畸变程度系数和图像畸变程度阈值的大小关系进行衡量。比如,当第一图像区域具有的第一图像畸变程度系数小于图像畸变程度阈值,第二图像区域具有的第二图像畸变程度系数大于图像畸变程度阈值时,可以判定第一图像区域的图像畸变程度小于第二图像区域的图像畸变程度。
本申请实施例中,将目标图像中畸变程度较小的图像区域划分为较大尺寸的网格单元,可以降低电子设备在进行图像校正时花费的功耗和资源。将目标图像中畸变程度较大的图像区域划分为较小尺寸的网格单元,可以提高电子设备的图像校正效果。
又一种可能的实现方式中,当电子设备按照图像区域的图像重要程度划分时,电子设备可以将图像重要程度小的图像区域划分为第一图像区域,将图像重要程度大的图像区域划分为第二图像区域。
其中,本申请实施例中的图像重要程度是目标图像中不同区域或不同内容的图像的重要程度。例如,在目标图像包括人物图像和风景图像的情况下,人物图像的图像重要程度可以大于风景图像的图像重要程度。
可选的,本申请实施例中,第一种实现方式为,图像重要程度可以通过图像重要程度系数进行衡量。比如,将第一图像区域具有的第一图像重要程度系数和第二图像区域具有的第二图像重要程度系数进行大小比较,当第一图像重要程度系数小于第二图像重要程度系数时,可以判定第一图像区域的图像重要程度小于第二图像区域的图像重要程度。
第二种实现方式为,图像重要程度可以通过将图像重要程度系数和图像重要程度阈值的大小关系进行衡量。比如,当第一图像区域具有的第一图像重要程度系数小于图像重要程度阈值,第二图像区域具有的第二图像重要程度系数大于图像重要程度阈值时,可以判定第一图像区域的图像重要程度小于第二图像区域的图像重要程度。
本申请实施例中,将目标图像中图像重要程度较小的图像区域划分为较大尺寸的网格单元,可以降低电子设备在进行图像校正时花费的功耗和资源。将目标图像中图像重要程度较大的图像区域划分为较小尺寸的网格单元,可以提高电子设备的图像校正效果。
本申请实施例中,电子设备将插值模板划分M个网格单元之后,可以分别对M个网格单元中的每个网格单元进行图像校正,从而以将待校正图像校正为目标图像。可以理解,目标图像为对待校正图像校正后的图像,即如果待校正图像为发生畸变的图像,那么目标图像即为未发生畸变的图像。
本申请实施例中,电子设备对M个网格单元中的每个网格单元进行图像校正时均可以采用如下S102-S103所示的方法,从而可以将待校正图像校正为目标图像。下面具体以M个网格单元中的一个网格单元为例对电子设备对每个网格单元进行图像校正的方法进行示例性地说明。
S102、电子设备确定一个网格单元中的插值点的位置。
可选的,本申请实施例中,插值点的位置可以通过数值或坐标值表示。
可选的,本申请实施例中,上述S102具体可以通过下述的S102a和S102b实现。
S102a、电子设备确定一个网格单元的顶点的位置。
可选的,本申请实施例中,电子设备可以利用经过标定的畸变查找表,确定网格单元的顶点的位置。畸变查找表表示了网格单元的顶点处的待校正像素点(即待校正图像中的像素点)和目标像素点(即目标图像中的像素点)之间的映射关系。因此,电子设备能够利用经过标定的畸变查找表,确定网格单元的顶点的位置。
可选的,本申请实施例中,畸变查找表可以通过对电子设备的镜头进行标定获得,畸变查找表可以作为已知的参数,通过固件(firmware)预先配置到电子设备的硬件模块中。
S102b、电子设备根据顶点的位置和网格单元的尺寸,确定网格单元中的插值点的位置。
可选的,本申请实施例中,电子设备可以通过双线性插值(bi-linear)算法,根据顶点的位置和网格单元的尺寸,确定网格单元中的插值点的位置。
示例性地,下面以8×8的网格单元为例,对电子设备根据顶点的位置和网格单元的尺寸,确定网格单元中的插值点的位置的方法进行示例性的说明。
如图8所示,已知网格单元中A、B、C和D四个顶点在目标图像中的坐标分别是(xa,ya)、(xb,yb)、(xc,yc)和(xd,yd),则网格单元中插值点p在目标图像中的坐标可以采用双线性插值算法计算得到,具体公式如下:
xp=dy*((dx*xa)+(1-dx)*xb))+(1-dy)*((dx*xc+(1-dx)*xd));
yp=dy*((dx*ya)+(1-dx)*yb))+(1-dy)*((dx*yc+(1-dx)*yd))。
其中,xp为插值点p的x轴坐标,yp为插值点p的y轴坐标。由于网格单元为8×8,所以图8中的dx和dy都为2/8。由此,将A、B、C和D四个顶点的坐标值,以及dx和dy带入上述公式,则可算出插值点p的位置。
下面以一个插值点为例,对上述S103进行示例性地说明。
S103、电子设备根据插值点的位置以及待校正图像,得到目标图像。
可以理解,本申请实施例中,电子设备根据M个网格单元中每个网格单元中的插值点的位置以及待校正图像,可以得到目标图像(即将上述待校正图像校正为目标图像)。
可选的,本申请实施例中,上述一个网格单元中的插值点可以为一个,也可以为多个,具体可以根据实际使用需求确定,本申请实施例不作限定。
可选的,本申请实施例中,在上述S103中,电子设备可以根据插值点的位置,获取该插值点的相邻像素点的像素值,然后再根据该相邻像素点的像素值以及待校正图像,得到目标图像。
对于相关技术中的电子设备而言,待校正图像和目标图像的坐标关系不是线性关系,因此读取输入图像并不是按照固定顺序读取的,这造成了运算过程中对内存访问的压力。并且,相关技术中的电子设备对待校正图像和目标图像的处理方式是按照行处理的方式进行的,需要使用大量的行缓存(line buffer)来存储需要的像素点,对于畸变较大的情况,为了能让待校正图像全都保存在行缓存中,则需要一个非常大的行缓存,这样对硬件存储资源的消耗巨大,模块运行功耗也非常大,又容易占用较多的带宽,造成的较高延迟,导致了性能的下降。
可选的,本申请实施例中,电子设备的缓存可以为瓦片(tile)结构,即电子设备的缓存被划分为多个瓦片单元。如此,当电子设备根据一个插值点的位置进行图像校正时,电子设备首先可以从电子设备的缓存中读取包括该插值点的相邻像素点的像素值的瓦片单元(以下称为目标瓦片单元),若电子设备部在缓存中未读取到目标瓦片单元,则电子设备可以从电子设备的内存(例如DDR)中读取目标瓦片单元。
可选的,本申请实施例中,上述S103具体可以通过下述的S103a至S103c实现。
S103a、电子设备根据插值点的位置,从电子设备的缓存中读取目标瓦片单元。
其中,上述目标瓦片单元中包括该插值点的相邻像素点的像素值。
可选的,本申请实施例中,电子设备的缓存可以为高速缓冲存储器(cache),还可以为其他缓存。具体可以根据实际使用需求确定,本申请实施例不作限定。
可以理解,缓存中的数据可以采用瓦片单元为存储单位进行存储。
S103b、若电子设备从缓存中未读取到目标瓦片单元,则电子设备从电子设备的内存中读取目标瓦片单元。
可选的,本申请实施例中,电子设备的内存可以为双倍速率同步动态随机存储器(Double Data Rate存储器,DDR存储器)。
可以理解,内存中的数据也可以采用瓦片(tile)单元为存储单位进行存储。
本申请实施例中,电子设备可以采用离线处理的方式实现数据调取。换言之,电子设备具有以瓦片单元为存储单位的缓存,若电子设备从缓存中未读取到目标瓦片单元,则电子设备从电子设备的内存中读取目标瓦片单元。
S103c、电子设备根据该相邻像素点的像素值,将待校正图像校正为目标图像。
可选的,本申请实施例中,电子设备可以通过双三次插值(bi-cubic)算法,根据该相邻像素点的像素值,将待校正图像校正为目标图像。
示例性地,下面以图8和图9为例,对电子设备根据该相邻像素点的像素值,将待校正图像校正为目标图像的方法进行示例性的说明。
可选的,本申请实施例中,上述S103b之后,还包括:
S103d、将目标瓦片单元存储至缓存。
图8中插值点p的位置可以通过上述双线性插值法的公式计算得到。如图9所示,电子设备可以根据插值点p的位置,确定插值点p的周围有16个相邻像素点。并且电子设备可以从缓存(或内存)中读取该16个相邻像素点的像素值,然后电子设备可以通过双三次插值算法,可根据该16个相邻像素点的像素值,计算得到插值点p的像素值,以进行图像校正。其中,对于双三次插值算法的具体计算过程可以参见相关技术中的描述,此处不予赘述。
可以理解,如果上述插值点p未发生畸变,则无需进行上述插值计算。
本申请实施例中,为了达到待校正图像的读取效率与硬件资源开销之间的最佳平衡,可以将电子设备的缓存和内存均设置为瓦片结构,如此,电子设备在根据插值点的位置读取该插值点的相邻像素点的像素值时,可以以瓦片单元为单位,进行数据读取。
本申请实施例中,电子设备可以先从电子设备的缓存中读取包含该相邻像素点的像素值的目标瓦片单元;若电子设备从缓存中未读取到目标瓦片单元,则电子设备再从电子设备的内存中读取目标瓦片单元。由此,本申请实施例的电子设备能够减少对内存的访问次数,提高电子设备对待校正图像的读取效率,并节省电子设备的硬件资源。
可选的,本申请实施例中,上述M个网格单元的调整顺序(即如上述实施例描述的以网格单元为单位,调整每个网格单元中的插值点的像素值)为M个网格单元的尺寸(即上述网格单元尺寸)从小到大的顺序,或者为M个网格单元的尺寸从大到小的顺序。
换言之,根据插值点的位置以及待校正图像,得到目标图像,包括:根据插值点的位置,按M个网格单元的尺寸从小到大的顺序,将待校正图像校正为目标图像;或根据插值点的位置,按M个网格单元的尺寸从大到小的顺序,将待校正图像校正为目标图像。
可以理解,电子设备在将待校正图像校正为目标图像时,可以按照M个网格单元的尺寸(即网格单元尺寸)从小到大的顺序,或者从大到小的顺序,依次以每个网格单元为单位进行校正。
可选的,本申请实施例中,电子设备在执行上述S103,即在校正一个网格单元中的图像时,具体可以按照该网格单元中的插值点的排列顺序,从左到右,从上到下,依次根据每个插值点的位置,进行图像校正。
需要说明的是,如图8所示,电子设备在校正一个网格单元中的图像时,可以由网格单元内左上角的像素点开始,逐行横向进行校正。具体的,当完成该网格单元的校正后,则按照上述规则继续校正下一个网格单元。此外,在按将插值模板划分两个或两个以上的图像区域的情况下,当一个图像区域的网格单元全部按照上述规则校正完之后,再切换到另一个图像区域按照上述规则进行校正。
如图10所示,本申请实施例还提供了一种图像校正装置200,该图像校正装置200包括:划分模块210、确定模块220和校正模块230。划分模块210用于将插值模板划分为M个网格单元,M个网格单元包括至少两种尺寸的网格单元,M为大于1的整数;确定模块220,用于对于划分模块210划分的M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置;校正模块230,用于根据确定模块220确定的插值点的位置以及待校正图像,得到目标图像。其中,插值模板的形状和/或尺寸与目标图像相同。
可选的,本申请实施例中,划分模块210具体用于将插值模板划分N个图像区域;并且,对于N个图像区域中的每个图像区域,按照一个图像区域对应的网格单元尺寸,将一个图像区域划分为至少一个网格单元,以划分M个网格单元。其中,N个图像区域中的至少两个图像区域对应不同的网格单元尺寸,N为大于1的整数。
可选的,本申请实施例中,N个图像区域中的第一图像区域对应的网格单元尺寸大于N个图像区域中的第二图像区域对应的网格单元尺寸。其中,第一图像区域为处于插值模板中心区域的图像区域,第二图像区域为处于插值模板边缘区域的图像区域;或者,第一图像区域的图像畸变程度小于第二图像区域的图像畸变程度;或者,第一图像区域的图像重要程度小于第二图像区域的图像重要程度。
可选的,本申请实施例中,确定模块220具体用于确定一个网格单元的顶点的位置;并根据顶点的位置和一个网格单元的尺寸,确定插值点的位置。
可选的,本申请实施例中,校正模块230具体用于根据确定模块220确定的插值点的位置,从缓存中读取目标瓦片单元,目标瓦片单元中包括插值点的相邻像素点的像素值;并且,若从缓存中未读取到目标瓦片单元,则从内存中读取目标瓦片单元;以及根据相邻像素点的像素值,将待校正图像校正为目标图像。
可选的,本申请实施例中,如图11所示,图像校正装置200还包括:存储模块240,存储模块240用于在校正模块从内存中读取目标瓦片单元之后,将目标瓦片单元存储至缓存。
可选的,本申请实施例中,校正模块具体用于所述插值点的位置,按M个网格单元的尺寸从小到大的顺序,将待校正图像校正为目标图像。
可选的,本申请实施例中,校正模块具体用于根据插值点的位置,按M个网格单元的尺寸从大到小的顺序,将待校正图像校正为目标图像。
本申请实施例中的图像校正装置200可以是电子设备,也可以是电子设备中的部件、集成电路、或芯片。
本申请实施例提供的图像校正装置200能够实现本申请任一实施例的图像校正方法,因而也具有本申请任一实施例的图像校正方法的全部有益效果。具体而言,本申请实施例提供的图像校正装置首将插值模板划分为包括至少两种尺寸的M个网格单元。由于M个网格单元包括至少两种尺寸的网格单元,因此本申请实施例提供的图像校正装置可在后续的校正步骤中对不同尺寸的网格单元分别进行校正。进而,申请实施例提供的图像校正装置对于M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置,然后再根据插值点的位置以及待校正图像,得到目标图像。如此,本申请实施例能够分别对不同尺寸的网格单元进行校正,以将待校正图像校正为目标图像。由于在图像校正过程中,采用尺寸相对较大的网格单元,可保证校正处理的效率较高;采用尺寸相对较小的网格单元,可保证校正处理的效果较好。因此,本申请实施例提供的图像校正装置通过按插值模板的形状和/或尺寸划分包括至少两种尺寸的M个网格单元,能够兼顾图像校正的校正效率和校正效果,利用较少的功耗和资源,获得较为理想的校正效果。
如图12所示,本申请实施例还提供了一种电子设备100,包括处理器110,存储器109,存储在存储器109上并可在处理器110上运行的程序或指令,该程序或指令被处理器110执行时实现上述图像校正方法实施例的各个过程,且能达到相同的技术效果。具体而言,本申请实施例提供的电子设备首先将插值模板划分为包括至少两种尺寸的M个网格单元。由于M个网格单元包括至少两种尺寸的网格单元,因此本申请实施例提供的电子设备可在后续的校正步骤中对不同尺寸的网格单元分别进行校正。进而,申请实施例提供的电子设备对于M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置,然后再根据插值点的位置以及待校正图像,得到目标图像。如此,本申请实施例能够分别对不同尺寸的网格单元进行校正,以将待校正图像校正为目标图像。由于在图像校正过程中,采用尺寸相对较大的网格单元,可保证校正处理的效率较高;采用尺寸相对较小的网格单元,可保证校正处理的效果较好。因此,本申请实施例提供的电子设备通过将插值模板划分包括至少两种尺寸的M个网格单元,能够兼顾图像校正的校正效率和校正效果,利用较少的功耗和资源,获得较为理想的校正效果。
需要说明的是,本申请实施例中的电子设备可以为移动电子设备,也可以为非移动电子设备。
图13为实现本申请实施例的电子设备的硬件结构示意图。该电子设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、以及处理器110等部件。
处理器110用于将插值模板划分为M个网格单元,M个网格单元包括至少两种尺寸的网格单元;并且对于M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置;以及根据插值点的位置以及待校正图像,得到目标图像。其中,M为大于1的整数,插值模板的形状和/或尺寸与目标图像相同。
可选的,本申请实施例中,处理器110具体用于将插值模板划分为N个图像区域;并且对于N个图像区域中的每个图像区域,按照一个图像区域对应的网格单元尺寸,将一个图像区域划分为至少一个网格单元,以划分M个网格单元。其中,N为大于1的整数,N个图像区域中的至少两个图像区域对应不同的网格单元尺寸。
可选的,本申请实施例中,处理器110具体用于确定一个网格单元的顶点的位置;并且根据顶点的位置和一个网格单元的尺寸,确定插值点的位置。
可选的,本申请实施例中,处理器110具体用于根据插值点的位置,从缓存中读取目标瓦片单元,目标瓦片单元中包括插值点的相邻像素点的像素值;并且若从缓存中未读取到目标瓦片单元,则从内存中读取目标瓦片单元;以及根据相邻像素点的像素值,将待校正图像校正为目标图像。
可选的,本申请实施例中,处理器110还用于在从内存中读取目标瓦片单元之后,将目标瓦片单元存储至缓存。
本领域技术人员可以理解,电子设备100还可以包括给各个部件供电的电源111(比如电池),电源可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图13中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
应理解的是,本申请实施例中,输入单元104可以包括图形处理器(graphicsprocessing unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元106可包括显示面板1061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板1061。用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器109可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
本申请实施例还提供一种可读存储介质,可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述图像校正方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,处理器为上述实施例中的电子设备中的处理器。可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、磁碟或者光盘等。
本申请实施例还提供了一种芯片,该芯片包括处理器和通信接口,通信接口和处理器耦合,处理器用于运行程序或指令,实现上述图像校正方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (17)
1.一种图像校正方法,其特征在于,所述方法包括:
将插值模板划分为M个网格单元,所述M个网格单元包括至少两种尺寸的网格单元,M为大于1的整数;
对于所述M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置;
根据所述插值点的位置以及待校正图像,得到目标图像;
其中,所述插值模板的形状和/或尺寸与所述目标图像相同。
2.根据权利要求1所述的方法,其特征在于,所述将插值模板划分为M个网格单元,包括:
将所述插值模板划分N个图像区域,N为大于1的整数;
对于所述N个图像区域中的每个图像区域,按照一个图像区域对应的网格单元尺寸,将所述一个图像区域划分为至少一个网格单元,以划分所述M个网格单元;
其中,所述N个图像区域中的至少两个图像区域对应不同的网格单元尺寸。
3.根据权利要求2所述的方法,其特征在于,
所述N个图像区域中的第一图像区域对应的网格单元尺寸大于所述N个图像区域中的第二图像区域对应的网格单元尺寸;
其中,所述第一图像区域为处于所述将插值模板中心区域的图像区域,所述第二图像区域为处于所述插值模板边缘区域的图像区域;或者,所述第一图像区域的图像畸变程度小于所述第二图像区域的图像畸变程度;或者,所述第一图像区域的图像重要程度小于所述第二图像区域的图像重要程度。
4.根据权利要求1所述的方法,其特征在于,所述确定一个网格单元中的插值点的位置,包括:
确定所述一个网格单元的顶点的位置;
根据所述顶点的位置和所述一个网格单元的尺寸,确定所述插值点的位置。
5.根据权利要求1至4中任一项所述的方法,其特征在于,所述根据所述插值点的位置以及待校正图像,得到目标图像,包括:
根据所述插值点的位置,从缓存中读取目标瓦片单元,所述目标瓦片单元中包括所述插值点的相邻像素点的像素值;
若从所述缓存中未读取到所述目标瓦片单元,则从内存中读取所述目标瓦片单元;
根据所述相邻像素点的像素值,将所述待校正图像校正为所述目标图像。
6.根据权利要求5所述的方法,其特征在于,所述从内存中读取所述目标瓦片单元之后,所述方法还包括:
将所述目标瓦片单元存储至所述缓存。
7.根据权利要求1所述的方法,其特征在于,所述根据所述插值点的位置以及待校正图像,得到目标图像,包括:
根据所述插值点的位置,按所述M个网格单元的尺寸从小到大的顺序,将所述待校正图像校正为所述目标图像;或
根据所述插值点的位置,按所述M个网格单元的尺寸从大到小的顺序,将所述待校正图像校正为所述目标图像。
8.一种图像校正装置,其特征在于,所述装置包括:
划分模块,用于将插值模板划分为M个网格单元,所述M个网格单元包括至少两种尺寸的网格单元,M为大于1的整数;
确定模块,用于对于所述划分模块划分的所述M个网格单元中的每个网格单元,确定一个网格单元中的插值点的位置;
校正模块,用于根据所述确定模块确定的所述插值点的位置以及待校正图像,得到目标图像;
其中,所述插值模板的形状和/或尺寸与所述目标图像相同。
9.根据权利要求8所述的装置,其特征在于,
所述划分模块,具体用于将所述插值模板划分N个图像区域;并且,对于所述N个图像区域中的每个图像区域,按照一个图像区域对应的网格单元尺寸,将所述一个图像区域划分为至少一个网格单元,以划分所述M个网格单元;
其中,所述N个图像区域中的至少两个图像区域对应不同的网格单元尺寸,N为大于1的整数。
10.根据权利要求9所述的装置,其特征在于,
所述N个图像区域中的第一图像区域对应的网格单元尺寸大于所述N个图像区域中的第二图像区域对应的网格单元尺寸;
其中,所述第一图像区域为处于所述插值模板中心区域的图像区域,所述第二图像区域为处于所述插值模板边缘区域的图像区域;或者,所述第一图像区域的图像畸变程度小于所述第二图像区域的图像畸变程度;或者,所述第一图像区域的图像重要程度小于所述第二图像区域的图像重要程度。
11.根据权利要求8所述的装置,其特征在于,
所述确定模块,具体用于确定所述一个网格单元的顶点的位置;并根据所述顶点的位置和所述一个网格单元的尺寸,确定所述插值点的位置。
12.根据权利要求8至11中任一项所述的装置,其特征在于,
所述校正模块,具体用于根据所述确定模块确定的所述插值点的位置,从缓存中读取目标瓦片单元,所述目标瓦片单元中包括所述插值点的相邻像素点的像素值;并且,若从所述缓存中未读取到所述目标瓦片单元,则从内存中读取所述目标瓦片单元;以及根据所述相邻像素点的像素值,将所述待校正图像校正为所述目标图像。
13.根据权利要求12所述的装置,其特征在于,所述装置还包括:
存储模块,用于在所述校正模块从内存中读取所述目标瓦片单元之后,将所述目标瓦片单元存储至所述缓存。
14.根据权利要求8所述的装置,其特征在于
所述校正模块,具体用于根据所述插值点的位置,按所述M个网格单元的尺寸从小到大的顺序,将所述待校正图像校正为所述目标图像;或
所述校正模块,具体用于根据所述插值点的位置,按所述M个网格单元的尺寸从大到小的顺序,将所述待校正图像校正为所述目标图像。
15.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
16.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
17.一种芯片,其特征在于,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110385200.3A CN113284057A (zh) | 2021-04-09 | 2021-04-09 | 图像校正方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110385200.3A CN113284057A (zh) | 2021-04-09 | 2021-04-09 | 图像校正方法、装置及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113284057A true CN113284057A (zh) | 2021-08-20 |
Family
ID=77276502
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110385200.3A Pending CN113284057A (zh) | 2021-04-09 | 2021-04-09 | 图像校正方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113284057A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110116387A (ko) * | 2010-04-19 | 2011-10-26 | 클레어픽셀 주식회사 | 촬상 장치 및 영상 왜곡 보정 방법 |
CN105005972A (zh) * | 2015-06-30 | 2015-10-28 | 广东欧珀移动通信有限公司 | 一种基于拍摄距离的畸变校正方法及移动终端 |
CN105138678A (zh) * | 2015-09-11 | 2015-12-09 | 武汉云空间地理信息技术有限公司 | 一种地图瓦片数据的读取、分发方法及读取、分发系统 |
CN106528699A (zh) * | 2016-11-02 | 2017-03-22 | 北京航天泰坦科技股份有限公司 | 一种用于快速建立影像金字塔的io多线程计算方法与系统 |
CN109754380A (zh) * | 2019-01-02 | 2019-05-14 | 京东方科技集团股份有限公司 | 一种图像处理方法及图像处理装置、显示装置 |
CN111355863A (zh) * | 2020-04-07 | 2020-06-30 | 北京达佳互联信息技术有限公司 | 一种图像畸变校正方法、装置、电子设备及存储介质 |
-
2021
- 2021-04-09 CN CN202110385200.3A patent/CN113284057A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110116387A (ko) * | 2010-04-19 | 2011-10-26 | 클레어픽셀 주식회사 | 촬상 장치 및 영상 왜곡 보정 방법 |
CN105005972A (zh) * | 2015-06-30 | 2015-10-28 | 广东欧珀移动通信有限公司 | 一种基于拍摄距离的畸变校正方法及移动终端 |
CN105138678A (zh) * | 2015-09-11 | 2015-12-09 | 武汉云空间地理信息技术有限公司 | 一种地图瓦片数据的读取、分发方法及读取、分发系统 |
CN106528699A (zh) * | 2016-11-02 | 2017-03-22 | 北京航天泰坦科技股份有限公司 | 一种用于快速建立影像金字塔的io多线程计算方法与系统 |
CN109754380A (zh) * | 2019-01-02 | 2019-05-14 | 京东方科技集团股份有限公司 | 一种图像处理方法及图像处理装置、显示装置 |
CN111355863A (zh) * | 2020-04-07 | 2020-06-30 | 北京达佳互联信息技术有限公司 | 一种图像畸变校正方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104994283A (zh) | 一种局部畸变的校正方法及移动终端 | |
CN205140493U (zh) | 控制显示屏进行横竖屏切换的装置 | |
US7742636B2 (en) | Method and apparatus for scaling down a bayer domain image | |
CN103167218A (zh) | 一种基于非局部性的超分辨率重建方法和设备 | |
CN112686824A (zh) | 图像校正方法、装置、电子设备和计算机可读介质 | |
WO2024061327A1 (zh) | 矢量地图生成方法、装置、电子设备和可读存储介质 | |
CN101510421B (zh) | 一种调整点阵字符大小的方法、装置及一种嵌入式系统 | |
CN112037160B (zh) | 图像处理方法、装置及设备 | |
CN113643414A (zh) | 一种三维图像生成方法、装置、电子设备及存储介质 | |
CN113963072B (zh) | 双目摄像头标定方法、装置、计算机设备和存储介质 | |
CN111476718A (zh) | 一种图像放大方法、装置、存储介质及终端设备 | |
CN111080544A (zh) | 基于图像的人脸畸变校正方法、装置及电子设备 | |
WO2024002064A1 (zh) | 三维模型构建方法、装置、电子设备及存储介质 | |
CN112927163A (zh) | 图像数据增强方法、装置、电子设备及存储介质 | |
CN113506305A (zh) | 三维点云数据的图像增强方法、语义分割方法及装置 | |
CN111507894B (zh) | 一种图像拼接处理方法及装置 | |
CN105427235B (zh) | 一种图像浏览方法及系统 | |
CN113284057A (zh) | 图像校正方法、装置及电子设备 | |
CN113724141B (zh) | 一种图像校正方法、装置及电子设备 | |
CN102843479A (zh) | 文件扫描方法、文件扫描装置及便携式电子装置 | |
CN111091083B (zh) | 基于图像的人脸尺度计算方法、装置及电子设备 | |
KR101688435B1 (ko) | 블록 구조를 이용한 적분 영상 생성 장치 및 그 방법 | |
CN114494034A (zh) | 一种图像畸变矫正方法及装置和设备 | |
CN103929584B (zh) | 图像校正方法及图像校正电路 | |
CN112613409A (zh) | 手部关键点检测方法、装置、网络设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |