CN113592844A - 图像畸变矫正方法及装置、终端和存储介质 - Google Patents
图像畸变矫正方法及装置、终端和存储介质 Download PDFInfo
- Publication number
- CN113592844A CN113592844A CN202110911414.XA CN202110911414A CN113592844A CN 113592844 A CN113592844 A CN 113592844A CN 202110911414 A CN202110911414 A CN 202110911414A CN 113592844 A CN113592844 A CN 113592844A
- Authority
- CN
- China
- Prior art keywords
- image
- sub
- distortion correction
- images
- width
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012937 correction Methods 0.000 title claims abstract description 104
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000003860 storage Methods 0.000 title claims abstract description 11
- 238000012545 processing Methods 0.000 claims abstract description 31
- 238000005520 cutting process Methods 0.000 claims abstract description 7
- 239000000872 buffer Substances 0.000 claims description 27
- 230000008569 process Effects 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 4
- 239000002699 waste material Substances 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 6
- 230000004075 alteration Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
本申请实施例提供一种图像畸变矫正方法及装置、终端和存储介质,该方法包括根据行缓存参数对待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数;分别对所述多个子图像进行畸变矫正处理,并基于经过畸变矫正处理的所述多个子图像得到目标输出图像。通过上述方案,在对图像宽度大于硬件linebuffer的宽度的待处理图像进行畸变矫正前,对该待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数(即,linebuffer的宽度),从而可以避免为适应大像素sensor而增大linebuffer而导致浪费硬件面积的问题。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像畸变矫正方法及装置、终端和存储介质。
背景技术
手机拍摄为了接近单反相机的效果,会增加一个拥有宽阔视野和较大的景深的超广角镜头,与长焦镜头相比,其视野范围更宽大,并且所拍摄出来景致的场景空间感也会有一种压缩感,带来强大的视觉冲击力。但是这种镜头拍摄的图像会产生一定的畸变,需要软件支持矫正。
然而在硬件受限的情况下,存在硬件的行缓存(linebuffer)的宽度远小于超广角传感器(Ultra Wide sensor)的像素宽度的问题,若为适应大像素sensor而增大linebuffer,则会导致浪费硬件面积的问题。
发明内容
本发明实施例提供图像畸变矫正方法可以在对图像宽度大于硬件linebuffer的宽度的待处理图像进行畸变矫正前,对该待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数(即,linebuffer的宽度),从而可以避免为适应大像素sensor而增大linebuffer而导致浪费硬件面积的问题。
第一方面,本发明实施例提供一种图像畸变矫正方法,该方法包括:根据行缓存参数对待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数;以及分别对所述多个子图像进行畸变矫正处理,并基于经过畸变矫正处理的所述多个子图像得到目标输出图像。
进一步地,所述根据行缓存参数对待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数包括:若确定当前待处理图像的图像宽度大于所述行缓存参数,则执行一次图像裁剪操作,以使本次图像裁剪操作后得到的所述子图像的图像宽度不大于所述行缓存参数,将本次图像裁剪操作后得到的一个所述子图像保存至DDR,并将本次裁剪操作后剩余的图像作为下一次图像裁剪操作的待处理图像;若确定当前待处理图像的图像宽度不大于所述行缓存参数,则基于行缓存将当前待处理图像作为一个子图像保存至所述DDR。
进一步地,在所述图像裁剪操作中,以所述行缓存参数为裁剪宽度,对当前待处理图像进行裁剪。
进一步地,所述分别对所述多个子图像进行畸变矫正处理包括:每获取一个所述子图像,则对获取到的一个所述子图像进行畸变矫正处理;其中,对获取到的一个所述子图像进行畸变矫正处理的过程包括:根据矫正模块的数据请求信息从所述DDR存储的所述子图像中获取待矫正图像块到缓存器中,并基于所述矫正图像的矫正完成情况将所述缓存器中存储的所述矫正模块所需的下一个所述待矫正图像块发送给所述矫正模块;以及获取并矫正所述缓存器提供的一个所述子图像中每一个所述待矫正图像块,以输出经过畸变矫正的子图像。
进一步地,所述数据请求信息包括所述待矫正图像块的坐标信息;所述根据矫正模块的数据请求信息从所述DDR存储的所述子图像中获取待矫正图像块到缓存器中包括:根据所述矫正模块提供的所述待矫正图像块的坐标信息从所述DDR中获取对应位置的图像块;将获取到的所述对应位置的图像块存储到缓存器中。
进一步地,所述数据请求信息包括所述待矫正图像块的坐标信息;所述根据矫正模块的数据请求信息从所述DDR存储的所述子图像中获取待矫正图像块到缓存器中包括:根据所述矫正模块提供的所述待矫正图像块的坐标信息从所述DDR中获取对应位置的第一图像块;基于所述第一图像块在行方向上延长设定长度以得到第二图像块;将包含所述第一图像块和第二图像块的待矫正图像块存储到缓存器中。在一些实施方式中该缓存器可以为高速缓冲存储器cache。
第二方面,本申请实施例还提供一种图像畸变矫正装置,所述装置包括:裁剪模块,用于根据行缓存参数对待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数;以及矫正模块,用于分别对所述多个子图像进行畸变矫正处理,以基于经过所述矫正模块畸变矫正处理的所述多个子图像得到目标输出图像。
第三方面,本申请实施例还提供一种图像畸变矫正装置,所述装置包括:处理器和存储器,所述存储器用于存储至少一条指令,所述指令由所述处理器加载并执行时以实现第一方面提供的图像畸变矫正方法。
在一种实施方式中,第二方面提供的图像畸变矫正装置可以为一种集成有存储器的芯片,具体地,可以为一种图像信号处理(Image Signal Processing,ISP)芯片。
第四方面,本申请再一个实施例还提供一种芯片,所述芯片与存储器相连,当所述存储器中存储的程序或指令被执行时,实现第一方面提供的图像畸变矫正方法。
第五方面,本申请实施例还提供一种终端,所述终端包括第三方面提供的图像畸变矫正装置。
第六方面,本申请另一个实施例还提供一种终端,所述终端包括第四方面提供的芯片。
第七方面,本申请实施例还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现第一方面提供的图像畸变矫正方法。
通过上述技术方案,在对图像宽度大于硬件linebuffer的宽度的待处理图像进行畸变矫正前,对该待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数(即,linebuffer的宽度),从而可以避免为适应大像素sensor而增大linebuffer而导致浪费硬件面积的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请一个实施例提供的图像矫正方法的流程图;
图2a为本申请一个实施例提供的图像裁剪示意图;
图2b为本申请一个实施例提供的图像裁剪流程图;
图2c为本申请一个实施例提供的多切片示意图;
图3为本申请一个实施例提供的架构示意图;
图4为本申请一个实施例提供的畸变矫正处理的流程图;
图5为本申请一个实施例提供的坐标计算及像素插值示意图;
图6为本申请一个实施例提供的cache向dewarping模块供数的流程示意图;
图7为本申请一个实施例提供的切片矫正顺序示意图;
图8为本申请一个实施例提供的畸变矫正装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
超广角镜头拍摄的图像会产生一定的畸变,需要软件支持矫正。正常手机拍照中,透镜由于制造精度以及组装工艺的偏差会引入畸变,导致原始图像的失真,镜头的畸变分为径向畸变和切向畸变两类。径向畸变来自于透镜形状,是沿着透镜半径方向分布的畸变。由于光线在远离镜头中心的地方会比靠近镜头中心的地方更加弯曲,会导致成像越靠近中间的部分会凸出来,这种畸变是桶形畸变。
dewarping模块可以对超广角镜头的sensor数据进行畸变矫正,通过dewarping模块可以将畸变的图像恢复成正常的图像。由于超广角镜头的sensor数据的分辨率一般为一般为5184*4024,对于硬件的Linebuffer的要求很高。但是为满足例如上述超广角镜头此类大像素sensor的需求而增大硬件的Linebuffer,无疑会提高成本并且还会浪费硬件面积。
为克服上述技术问题,本申请实施例提供一种图像畸变矫正方法,通过该可以在对图像宽度大于硬件linebuffer的宽度的待处理图像进行畸变矫正前,对该待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数(即,linebuffer的宽度),从而可以避免为适应大像素sensor而增大linebuffer而导致浪费硬件面积的问题。
图1为本申请一个实施例提供的图像矫正方法的流程图,如图1所示,该方法包括以下步骤:
步骤101:根据行缓存参数对待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数。
步骤102:分别对所述多个子图像进行畸变矫正处理,并基于经过畸变矫正处理的所述多个子图像得到目标输出图像。
在步骤101的具体实施中,在sensor数据(即待处理图像)在进入流水线(Pipeline)前,若确定当前待处理图像的图像像素宽度大于所述行缓存参数,可以执行一次图像裁剪操作,具体可以根据行缓存参数(例如,linebuffer的宽度)对待处理图像进行裁剪以得到多个子图像,,使裁剪后得到的每个子图像的图像长度(即,子图像的像素长度)不变,图像宽度(即,子图像的像素宽度)不大于linebuffer的宽度。其中,上述图像像素宽度大于所述行缓存参数的图像可以为超广角镜头开启时得到的sensor图像。
图2a为本申请一个实施例提供的图像裁剪示意图,如图2a所示,在IPS芯片的图像信号处理操作过程中,在待处理图像在进入Pipeline之前,IPS芯片可以对待处理图像基于裁剪宽度L对待处理图像进行裁剪(切slice)的操作,以得到多个多个子图像(切片图像)。其中,该裁剪宽度L需小于等于linebuffer的宽度。如图2b所示,上述IPS芯片可以对待处理图像的裁剪过程包括:
步骤201:确定当前待处理图像的图像宽度是否大于行缓存的宽度,若大于行缓存的宽度,则执行步骤202,若不大于行缓存的宽度,则执行步骤203。
步骤202:执行一次图像裁剪操作,以得到一个图像宽度不大于行缓存的宽度的子图像后,分别执行步骤204和步骤205。
步骤203:将当前待处理图像作为一个子图像,并执行步骤204以完成图像裁剪操作。
步骤204:将子图像保存到DDR。
步骤205:将裁剪后剩余的图像作为下一次图像裁剪操作的待处理图像,并返回步骤201。
可以通过图2b所示实施例提供的图像裁剪过程图像宽度不大于行缓存的宽度的多个子图像并保存到DDR。即,经过上述图像裁剪操作后,DDR中保存有如图2c所示的多个子图像(切片)。
在一种实施方式中,可以以linebuffer的宽度作为裁剪宽度(即,L=linebuffer的宽度)对待处理图像进行裁剪,以充分利用Pipeline的处理能力。
通过以上方式可以解决图像宽度大于linebuffer的宽度的问题,并利用上述图像裁剪得到多个子图像的方式可以避免为满足例如上述超广角镜头此类大像素sensor的需求而增大硬件的Linebuffer而导致浪费硬件面积的问题。
在获取到经过上述图像裁剪后得到的多个子图像后,由于超广角镜头拍摄的图像存在一定畸变,因此需要对该多个子图像进行畸变矫正处理。
在现有的图像畸变矫正操作中,畸变模块将矫正表格中的数据分解为存储地址,缓存模块根据该地址读取图像的数据矩阵,此种方法有效缓解了现有技术中相机畸变系统占用内存和系统资源量较大而导致的系统整体性能较差的技术问题.但是此种方法此种方法会致使硬件IP频繁与DDR进行交互,浪费带宽。
为克服上述技术问题,本申请实施例提供一种如图3所示的具有超广角镜头畸变矫正功能的软硬件架构,其中,该架构可以包括双倍速率同步动态随机存储器301(DoubleData Rate,DDR)、矫正模块(Dewarping模块)302和高速缓冲存储器303(Cache)。如图3所示本申请实施例提供架构中在DDR301和Dewarping模块302之间增设了Cache302,通过Cache302在DDR中获取待矫正数据并交由Dewarping模块302进行畸变矫正处理,进而节省了硬件IP与DDR交互所消耗的带宽。
其中,DDR中保存的多个子图像(slice切片)可以按照如图2c所示的从左到右的slice一次进入pipeline中进行处理,在ISP Pipeline中,Dewarping模块302被设计在用金字塔机制实现的多层去噪模块之后,如果不开启超广角镜头(UW Sensor),金字塔重构模块的最后一层数据直接进入Pipeline,若当前处于开启超广角镜头(UW Sensor)的状态,由于linebuffer只能存储一行的数据,而dewarping模块302是按图像块进行处理的,linebuffer中的一行数据无法满足dewarping模块302处理图像的需要,所以金字塔重构的最后一层数据存储到DDR301中,dewarping模块302再配合cache303从DDR301中读取数据,完成畸变校正的功能。
图4为本申请一个实施例提供的畸变矫正处理的流程图,如图4所示,对一个待矫正图像块的畸变矫正处理包括以下步骤:
步骤401:高速缓冲存储器根据矫正模块的数据请求信息从DDR存储的子图像中获取待矫正图像块到高速缓冲存储器中,并基于矫正图像的矫正完成情况将高速缓冲存储器中存储的矫正模块所需的下一个待矫正图像块发送给矫正模块。
步骤402:矫正模块获取并矫正高速缓冲存储器提供的一个子图像中每一个待矫正图像块,以输出经过畸变矫正的子图像。
在上述图像畸变矫正过程中,dewarping的校正过程分为坐标计算和像素差值两个部分,dewarping模块302首先计算坐标,cache303根据该坐标和标定好的畸变偏移表快速定位矫正前的原始图像在DDR中的地址,快速将相应待处理的图像数据(待矫正图像块)获取到cache303中,并将数据传入到dewarping模块302内部,dewarping模块302根据坐标信息,利用像素插值计算得到矫正后的图像,矫正的这一个过程是以图像块为单位的,直到所有图像块得到了矫正后输出经过矫正的子图像,并在所有子图像完成校正后基于经过矫正的子图像得到最终的目标输出图像。
如图5所示,在dewarping模块的坐标计算过程中,dewarping模块302根据dst_image(矫正后图像)计算src_image(矫正前图像)中的图像坐标,具体地,从dst_image的左上至右下按照每个16*16的块位置,根据grid_table(栅格表)通过插值算法将4条边(a/b/c/d)共60个点对应在src_image中的60个位置都计算出来(图(b)的EFGH到图(a)EFGH,当dst_image的最右/最下切不满足16*16的块时,与前面/上面存在交叠的块凑够16*16的块,在完成像素插值之后,剪切掉多于的部分;之后根据这60个点的坐标找到最小包含横纵坐标最大值和最小值的矩形包络PQOS。并将计算得到的包络坐标信息(即,待矫正图像块的坐标信息)发送给cache303,cache303可以通过AXI通道向DDR请求该矩形范围数据。由于dst_image中相邻的下一个块在src_image中的位置中的位置必然是与上一个位置PQRS矩形包络相邻或者存在交叠部分。因此,cache303在每次请求src_image矩形包络数据时,应该每行适当超前预取一部分,为下一个包络准备。具体地,额可以为cache303根据dewarping模块302提供的所述待矫正图像块的坐标信息从所述DDR中获取对应位置的第一图像块,并基于该第一图像块在行方向上延长设定长度以得到第二图像块,进一步地,将包含所述第一图像块和第二图像块的待矫正图像块存储到cache303中。在一种实施方式中,基于该第一图像块在行方向上延长设定长度可以包括:在不超过行尾的情况下,预取2个burst长度或3个burst长度,其中,一个burst长度可以携带8个pixel。
在cache303根据dewarping模块302的数据请求信息获取到待矫正图像块后,可以将该待矫正图像块的数据传输给dewarping模块302,以使dewarping模块302根据待矫正图像块的数据对图5所示的目标块EFGH进行像素插值。通过dewarping模块302重复上述图像块数据获取和像素插值的动作,从而完成对一个子图像的畸变矫正,以得到一个经过畸变矫正的子图像。
图6为本申请一个实施例提供的cache向dewarping模块供数的流程示意图,如图6所示,Shape_fifo记录着从DDR中取数但还未被像素插值使用完的包络数据信息,Warp_fifo用来缓冲和收集来自DEWARP模块的包络坐标请求,Block_fifo缓冲和收集来自DEWARP模块的像素插值请求;Warp_fifo根据shape_fifo中的情况决定是否发起DDR请求,Block_fifo根据shape_fifo的情况,发起DATA的读请求,shape_fifo配合warp_fifo发起DDR的包络数据请求以及配合block_fifo完成从DATA_RAM中取数。Cache工作流程如下:
首先warp_fifo接收dewarping模块的包络矩形坐标请求,并可以缓冲多组,按照先进先出的方式进行存取;然后,根据cache的size结构以及当前dewarping模块像素插值的进度,其中Block_fifo用来缓冲和收集来自DEWARP模块的像素插值请求,并根据shape_fifo的情况,发起DATA的读请求。接着,DEWARP模块通过pixel_buffer获取所需要的坐标点的像素值,至此缓存模块完成一次缓存功能,满足DEWARP模块数据读取的需要。
如图7所示,在完成对一个子图像的畸变矫正后,金字塔重构模块(pyramids rec模块)控制启动下一个子图像的畸变矫正流程,并进入上述图像块数据获取和像素插值的操作,直至所有的子图像完成畸变矫正,进而得到经过畸变矫正的多个子图像。
需要说明的是,ISP中的后续模块还可以对dewarping模块302输出的上述经过畸变矫正的子图像进行相应处理,并将处理后的子图像存储至DDR,进而可以基于DDR中经过ISP处理后的子图像合成得到目标输出图像。
本申请一个实施例还提供一种本申请实施例还提供一种图像畸变矫正装置,所述装置包括:裁剪模块,用于根据行缓存参数对待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数;以及矫正模块,用于分别对所述多个子图像进行畸变矫正处理,以基于经过所述矫正模块畸变矫正处理的所述多个子图像得到目标输出图像。
图8为本申请要给实施例提供的一种图像畸变矫正装置,所述装置包括:处理器801和存储器802,所述存储器802用于存储至少一条指令,所述指令由所述处理器801加载并执行时以实现本申请任一实施例提供的图像畸变矫正方法。
在一种实施方式中,第二方面提供的图像畸变矫正装置可以为一种集成有存储器的芯片,具体地,可以为一种图像信号处理(Image Signal Processing,ISP)芯片。
本申请再一个实施例还提供一种芯片,所述芯片与存储器相连,当所述存储器中存储的程序或指令被执行时,实现本申请任一实施例提供的图像畸变矫正方法。
本申请再一个实施例还提供一种终端,该终端可以包括图8所示实施例提供的图像畸变矫正装置。
本申请再一个实施例还提供一种终端,该终端可以包括上述与存储器连接的芯片。
本申请再一个实施例还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现本申请任一实施例提供的图像畸变矫正方法。
需要说明的是,本发明实施例中所涉及的终端可以包括但不限于个人计算机(Personal Computer,PC)、个人数字助理(Personal Digital Assistant,PDA)、无线手持设备、平板电脑(Tablet Computer)、手机等具有超广角拍摄功能的终端。
可以理解的是,所述应用可以是安装在终端上的应用程序(nativeApp),或者还可以是终端上的浏览器的一个网页程序(webApp),本发明实施例对此不进行限定。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机装置(可以是个人计算机,服务器,或者网络装置等)或处理器(Processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (10)
1.一种图像畸变矫正方法,其特征在于,所述方法包括:
根据行缓存参数对待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数;
分别对所述多个子图像进行畸变矫正处理,并基于经过畸变矫正处理的所述多个子图像得到目标输出图像。
2.根据权利要求1所述的方法,其特征在于,所述根据行缓存参数对待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数包括:
若确定当前待处理图像的图像宽度大于所述行缓存参数,则执行一次图像裁剪操作,以使本次图像裁剪操作后得到的所述子图像的图像宽度不大于所述行缓存参数,将本次图像裁剪操作后得到的一个所述子图像保存至DDR,并将本次裁剪操作后剩余的图像作为下一次图像裁剪操作的待处理图像;
若确定当前待处理图像的图像宽度不大于所述行缓存参数,则基于行缓存将当前待处理图像作为一个子图像保存至所述DDR。
3.根据权利要求2所述的方法,其特征在于,在所述图像裁剪操作中,以所述行缓存参数为裁剪宽度,对当前待处理图像进行裁剪。
4.根据权利要求2所述的方法,其特征在于,所述分别对所述多个子图像进行畸变矫正处理包括:每获取一个所述子图像,则对获取到的一个所述子图像进行畸变矫正处理;
其中,对获取到的一个所述子图像进行畸变矫正处理的过程包括:
根据矫正模块的数据请求信息从所述DDR存储的所述子图像中获取待矫正图像块到缓存器中,并基于所述矫正图像的矫正完成情况将所述缓存器中存储的所述矫正模块所需的下一个所述待矫正图像块发送给所述矫正模块;以及
获取并矫正所述缓存器提供的一个所述子图像中每一个所述待矫正图像块,以输出经过畸变矫正的子图像。
5.根据权利要求4所述的方法,其特征在于,所述数据请求信息包括所述待矫正图像块的坐标信息;
所述根据矫正模块的数据请求信息从所述DDR存储的所述子图像中获取待矫正图像块到缓存器中包括:
根据所述矫正模块提供的所述待矫正图像块的坐标信息从所述DDR中获取对应位置的图像块;
将获取到的所述对应位置的图像块存储到缓存器中。
6.根据权利要求4所述的方法,其特征在于,所述数据请求信息包括所述待矫正图像块的坐标信息;
所述根据矫正模块的数据请求信息从所述DDR存储的所述子图像中获取待矫正图像块到缓存器中包括:
根据所述矫正模块提供的所述待矫正图像块的坐标信息从所述DDR中获取对应位置的第一图像块;
基于所述第一图像块在行方向上延长设定长度以得到第二图像块;
将包含所述第一图像块和第二图像块的待矫正图像块存储到缓存器中;
其中,所述缓存器包括高速缓存存储器。
7.一种图像畸变矫正装置,其特征在于,所述装置包括:
裁剪模块,用于根据行缓存参数对待处理图像进行裁剪以得到多个子图像,以使每个所述子图像的图像宽度不大于所述行缓存参数;以及
矫正模块,用于分别对所述多个子图像进行畸变矫正处理,以基于经过所述矫正模块畸变矫正处理的所述多个子图像得到目标输出图像。
8.一种图像畸变矫正装置,其特征在于,所述装置包括:
处理器和存储器,所述存储器用于存储至少一条指令,所述指令由所述处理器加载并执行时以实现如权利要求1-6中任意一项所述的图像畸变矫正方法。
9.一种终端,其特征在于,所述终端包括权利要求8所述的图像畸变矫正装置。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-6中任意一项所述的图像畸变矫正方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110911414.XA CN113592844A (zh) | 2021-08-10 | 2021-08-10 | 图像畸变矫正方法及装置、终端和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110911414.XA CN113592844A (zh) | 2021-08-10 | 2021-08-10 | 图像畸变矫正方法及装置、终端和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113592844A true CN113592844A (zh) | 2021-11-02 |
Family
ID=78256692
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110911414.XA Pending CN113592844A (zh) | 2021-08-10 | 2021-08-10 | 图像畸变矫正方法及装置、终端和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113592844A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116894796A (zh) * | 2023-09-11 | 2023-10-17 | 归芯科技(深圳)有限公司 | 图像降噪和畸变矫正联合处理方法及装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109672841A (zh) * | 2019-01-25 | 2019-04-23 | 珠海亿智电子科技有限公司 | 一种低成本de-interlace处理方法 |
CN112381739A (zh) * | 2020-11-23 | 2021-02-19 | 天津经纬恒润科技有限公司 | 一种ar-hud系统的成像畸变矫正方法及装置 |
CN113110802A (zh) * | 2021-04-16 | 2021-07-13 | 维沃移动通信有限公司 | 图像块的处理方法、装置、电子设备、可读存储介质 |
CN113191975A (zh) * | 2021-04-29 | 2021-07-30 | 展讯通信(上海)有限公司 | 图像畸变矫正方法及装置 |
-
2021
- 2021-08-10 CN CN202110911414.XA patent/CN113592844A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109672841A (zh) * | 2019-01-25 | 2019-04-23 | 珠海亿智电子科技有限公司 | 一种低成本de-interlace处理方法 |
CN112381739A (zh) * | 2020-11-23 | 2021-02-19 | 天津经纬恒润科技有限公司 | 一种ar-hud系统的成像畸变矫正方法及装置 |
CN113110802A (zh) * | 2021-04-16 | 2021-07-13 | 维沃移动通信有限公司 | 图像块的处理方法、装置、电子设备、可读存储介质 |
CN113191975A (zh) * | 2021-04-29 | 2021-07-30 | 展讯通信(上海)有限公司 | 图像畸变矫正方法及装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116894796A (zh) * | 2023-09-11 | 2023-10-17 | 归芯科技(深圳)有限公司 | 图像降噪和畸变矫正联合处理方法及装置 |
CN116894796B (zh) * | 2023-09-11 | 2023-12-26 | 归芯科技(深圳)有限公司 | 图像降噪和畸变矫正联合处理方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10395341B2 (en) | Panoramic image generation method and apparatus for user terminal | |
CN107945112B (zh) | 一种全景图像拼接方法及装置 | |
JP4960992B2 (ja) | 魚眼補正と透視歪み削減の画像処理方法及び画像処理装置 | |
US9787922B2 (en) | Pixel defect preprocessing in an image signal processor | |
CN115052104B (zh) | 图像处理方法、电子装置及非易失性计算机可读存储介质 | |
CN109167923B (zh) | 图像传输方法、装置、电子设备和存储介质 | |
CN110493525A (zh) | 变焦图像确定方法及装置、存储介质、终端 | |
CN113347334B (zh) | 一种移动终端无损拍照方法、装置、终端设备及存储介质 | |
WO2021185130A1 (zh) | 数字变焦方法、系统、电子设备、介质及数字成像设备 | |
CN113298695B (zh) | 一种图像处理组件和芯片、图像处理方法和存储介质 | |
US11783447B2 (en) | Methods and apparatus for optimized stitching of overcapture content | |
CN109785265B (zh) | 畸变矫正图像处理方法及图像处理装置 | |
US8269859B2 (en) | Photographing apparatus that performs distortion correction in association with digital and optical zoom, method of controlling the same, and recording medium having recorded thereon computer program to implement the method | |
CN113592844A (zh) | 图像畸变矫正方法及装置、终端和存储介质 | |
US8228395B2 (en) | Processing image frames in different formats with reduced memory requirements in digital still cameras | |
CN111212222A (zh) | 图像处理方法、装置、电子装置及存储介质 | |
JP2010176547A (ja) | 画像処理装置に含まれる制御装置、制御方法、及び制御処理プログラム | |
CN112598571B (zh) | 一种图像缩放方法、装置、终端及存储介质 | |
CN110602410B (zh) | 一种图像处理方法、装置、航拍相机及存储介质 | |
CN110969587A (zh) | 一种图像采集方法、装置及电子设备 | |
JP2007180898A (ja) | 画像処理装置 | |
CN111147694B (zh) | 拍摄方法、拍摄装置、终端设备及计算机可读存储介质 | |
CN111489418B (zh) | 图像处理方法、装置、设备及计算机可读存储介质 | |
CN113962892A (zh) | 校正广角镜头图像畸变的方法、装置及照相设备 | |
CN115829846A (zh) | 图像处理方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211102 |