CN108513043A - 一种图像降噪方法及终端 - Google Patents
一种图像降噪方法及终端 Download PDFInfo
- Publication number
- CN108513043A CN108513043A CN201710106574.0A CN201710106574A CN108513043A CN 108513043 A CN108513043 A CN 108513043A CN 201710106574 A CN201710106574 A CN 201710106574A CN 108513043 A CN108513043 A CN 108513043A
- Authority
- CN
- China
- Prior art keywords
- noise reduction
- image
- reduction coefficient
- frame image
- current frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 230000009467 reduction Effects 0.000 claims abstract description 176
- 238000011946 reduction process Methods 0.000 claims abstract description 27
- 241000208340 Araliaceae Species 0.000 claims description 5
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims description 5
- 235000003140 Panax quinquefolius Nutrition 0.000 claims description 5
- 235000008434 ginseng Nutrition 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 31
- 238000004422 calculation algorithm Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 8
- 238000004590 computer program Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 7
- 238000003860 storage Methods 0.000 description 7
- 230000004069 differentiation Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 230000006698 induction Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000003705 background correction Methods 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000005303 weighing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration using local operators
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/21—Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
- G06T2207/20032—Median filtering
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
本发明实施例公开了一种图像降噪方法,该方法包括:获取当前帧图像;获取与当前帧图像对应的第一镜头参数;根据第一镜头参数,确定当前帧图像的第一降噪系数;根据第一降噪系数对当前帧图像进行降噪处理。本发明实施例还同时公开了一种终端。
Description
技术领域
本发明涉及电子应用领域中的图像处理技术,尤其涉及一种图像降噪方法及终端。
背景技术
随着摄像技术的快速发展和终端的普及,用户对高质量图像的需求不断提高,拍照技术面临着越来越高的要求。而图像噪声(图像噪点)是衡量图像质量的一个重要因素,因此,图像降噪技术成为不可忽视的一个问题。
目前,针对图像降噪采用的图像降噪算法对图像进行降噪处理,例如中值滤波算法、自适应维纳滤波算法、小波降噪算法等图像降噪算法。具体的,根据整个图像的噪点特性和噪点大小采用图像降噪算法统一对该图像进行处理。然而,通过这样的降噪方式的处理,由于镜头的成像特性,图像的亮度从图像的中心到图像的四周有不同程度的衰减,因此,导致降噪后的图像存在以下两种极端:(1)、图像使用较强的降噪处理方式,图像的四周降噪效果较好,图像干净,但是图像中心细节牺牲较大,图像分辨率下降,图像模糊;(2)、图像采用较弱的降噪处理方式,图像整体的细节保留较多,但是图像的四周的噪点大,图像不干净。总之,采用现有的降噪处理方式对图像进行降噪处理时,会导致图像质量存在一定不足。
发明内容
为解决上述技术问题,本发明实施例期望提供一种图像降噪方法及终端,能够差异化进行图像降噪处理,经图像降噪后提高了图像质量。
本发明的技术方案是这样实现的:
本发明实施例提供了一种图像降噪方法,包括:
获取当前帧图像;
获取与所述当前帧图像对应的第一镜头参数;
根据所述第一镜头参数,确定所述当前帧图像的第一降噪系数;
根据所述第一降噪系数对所述当前帧图像进行降噪处理。
在上述方案中,所述根据所述第一镜头参数,确定所述当前帧图像的第一降噪系数,包括:
将所述当前帧图像划分为N个区域对应的N个第一图像,其中,N为大于1的自然数;
根据所述第一镜头参数,确定所述N个第一图像分别对应的N个第三降噪系数,将所述N个第三降噪系数确定为所述当前帧图像对应的所述第一降噪系数,其中,所述N个第一图像与所述N个第三降噪系数一一对应。
在上述方案中,所述根据所述第一镜头均匀性特性参数和所述第一镜头参数,确定所述N个第一图像分别对应的N个第三降噪系数,包括:
计算每个第一图像的中心点与所述当前帧图像的中心点的第一距离;
根据所述第一距离和所述第一镜头参数,确定所述每个第一图像对应的每个第一增益值;
根据所述每个第一增益值转换成所述每个第一图像对应的第三降噪系数,直至得到所述N个第三降噪系数。
在上述方案中,所述根据所述第一降噪系数对所述当前帧图像进行降噪处理,包括:
根据所述N个第三降噪系数对所述N个第一图像分别进行降噪处理,其中,所述N个第三降噪系数与所述N个第一图像一一对应。
在上述方案中,所述根据所述第一镜头参数,确定所述当前帧图像的第一降噪系数,包括:
获取上一帧图像对应的第二镜头均匀性特性参数;
根据预设容忍阈值,判断第一镜头均匀性特性参数和所述第二镜头均匀性特性参数是否存在差异;所述第一镜头参数包括:第一镜头均匀性特性参数和第一镜头均匀性补偿参数;
若判断出存在差异,则根据所述第一镜头均匀性补偿参数,确定所述当前帧图像的第一降噪系数;
若判断出未存在差异,则获取所述上一帧图像对应的第二降噪系数,将所述第二降噪系数确定为所述第一降噪系数。
本发明实施例提供了一种终端,包括:
获取单元,用于获取当前帧图像;及获取与所述当前帧图像对应的第一镜头参数;
确定单元,用于根据所述第一镜头参数,确定所述当前帧图像的第一降噪系数;
降噪单元,用于根据所述第一降噪系数对所述当前帧图像进行降噪处理。
在上述终端中,所述终端还包括:划分单元;
所述划分单元,用于将所述当前帧图像划分为N个区域对应的N个第一图像,其中,N为大于1的自然数;
所述确定单元,具体用于根据所述第一镜头参数,确定所述N个第一图像分别对应的N个第三降噪系数,将所述N个第三降噪系数确定为所述当前帧图像对应的所述第一降噪系数,其中,所述N个第一图像与所述N个第三降噪系数一一对应。
在上述终端中,所述终端还包括:计算单元和转换单元;
所述计算单元,用于计算每个第一图像的中心点与所述当前帧图像的中心点的第一距离;
所述确定单元,还具体用于根据所述第一距离和所述第一镜头参数,确定所述每个第一图像对应的每个第一增益值;
所述转换单元,用于根据所述每个第一增益值转换成所述每个第一图像对应的第三降噪系数,直至得到所述N个第三降噪系数。
在上述终端中,所述降噪单元,具体用于根据所述N个第三降噪系数对所述N个第一图像分别进行降噪处理,其中,所述N个第三降噪系数与所述N个第一图像一一对应。
在上述终端中,所述终端还包括:判断单元;
所述获取单元,还用于获取上一帧图像对应的第二镜头均匀性特性参数;
所述判断单元,用于根据预设容忍阈值,判断所述第一镜头均匀性特性参数和所述第二镜头均匀性特性参数是否存在差异;所述第一镜头参数包括:第一镜头均匀性特性参数和第一镜头均匀性补偿参数;
所述确定单元,具体用于若判断出存在差异,则根据所述第一镜头均匀性补偿参数,确定所述当前帧图像的第一降噪系数;或者,若判断出未存在差异,则获取所述上一帧图像对应的第二降噪系数,将所述第二降噪系数确定为所述第一降噪系数。
本发明实施例提供了一种图像降噪方法及终端,获取当前帧图像;获取与当前帧图像对应的第一镜头参数;根据第一镜头参数,确定当前帧图像的第一降噪系数;根据第一降噪系数对当前帧图像进行降噪处理。采用上述方案实现技术,由于终端可以对每帧图像基于镜头参数的考虑进行不同降噪系数的选择,从而实现对不同帧图像选择合适的降噪参数进行降噪处理的差异化,进而通过实现差异化进行图像降噪处理,提高了图像质量。
附图说明
图1为本发明实施例提供的一种图像降噪方法的流程图一;
图2为本发明实施例提供的像素排列方式的结构示意图;
图3为本发明实施例提供的CMOS光子感应示意图;
图4为本发明实施例提供的示例性的3帧图像的LS曲线图;
图5为本发明实施例提供的示例性的原始RAW数据成像图;
图6为本发明实施例提供的示例性的与图5对应的LSC特性曲线图;
图7为本发明实施例提供的一种图像降噪方法的流程图二;
图8为本发明实施例提供的一种终端的结构示意图一;
图9为本发明实施例提供的一种终端的结构示意图二;
图10为本发明实施例提供的一种终端的结构示意图三;
图11为本发明实施例提供的一种终端的结构示意图四;
图12为本发明实施例提供的一种终端的结构示意图五。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
实施例一
本发明实施例提供了一种图像降噪方法,如图1所示,该方法可以包括:
S101、获取当前帧图像。
在本发明实施例中,终端通过拍照功能对目标对象进行拍摄时,在该终端启动拍照功能时,该终端通过显示屏可以进行目标对象对应的图像的预览,于是,该终端可以获取当前帧图像,即当前帧的预览图像。其中,当前帧图像是指终端在当前帧获取到的目标对象对应的预览图像。
需要说明的是,在本发明实施例中,在终端利用设置在自身的摄像头进行图像拍摄或拍照的过程中,终端获取目标对象对应的当前帧图像,该当前帧图像为当前帧的原始RAW数据。在本发明实施例中,当前帧的原始RAW数据的获取是通过设置在终端中的图像传感器实现的。由于图像传感器可以实时的获取目标对象的预览图像,也就是说在预览时一直获取不同帧预览图像,因此,本发明实施例针对图像传感器获取的当前帧图像进行说明,每帧图像的原理都相同。
其中,图像传感器可以包括:电荷耦合元件(CCD,Charge-coupled Device)图像传感器、互补金属氧化物半导体(CMOS,Complementary Metal Oxide Semiconductor)图像传感器的Color Filter Array(CFA彩色滤镜阵列)元件。具体的,上述图像传感器由横竖两个方向密集排列的感光元件组成的一个二维矩阵,构成一种Bayer模式的RGB像素点排列,常见的有图2所示的(a)、(b)、(c)、(d)4种Bayer模式的排列方式,每个CCD就对应一个像素。其中,R感应红光、G感应绿光、B感应蓝光,而在Bayer模式中G是R和B的两倍(因为人类的眼睛对绿色更敏感)。
需要说明的是,在上述二维矩阵内的每个CCD或CMOS只是用来感受光子的能量,每个CCD或CMOS中由于进入光线的强度而产生对应比例的电荷,每个CCD或CMOS将这些电荷信息汇集并经过放大并储存起来,例如,如图3所示的CMOS光子感应示意图所示CMOS感应光子最后存储对应比例的电荷(图3中所示的方块),而RAW记录的就是每个像素位置的电荷值,它是没有记录任何的颜色信息的,也就是说:目标对象的原始RAW数据只是灰度文件而已。
在本发明实施例中,终端可以通过设置在其上的摄像头进行目标对象的拍摄,而在拍摄过程中,由于镜头的成像特性,如图4所示,终端获取的不同帧图像(图4为3帧图像的3条亮度曲线)的亮度从图像中心到图像四周与理想的亮度曲线会有不同程度的衰减,本领域技术人员将这种现象称为镜头均匀性,即lens shading曲线。
需要说明的是,原始RAW数据以图像形式呈现时则为一个灰度图像模式没有颜色的,如图5所示的原始RAW数据形成的图像中可以看到原始的RAW数据形成的图像是黑白色,并且还有马赛克现象(即噪点)出现。
因此,在本发明实施例中,终端需要将RAW数据进行图像处理(即图像信号处理)进行亮度补偿和降噪(图像信号处理)。终端可以通过图像处理器进行图像信号处理(ISP,Image Signal Processing)。
需要说明的是,本发明实施例中的终端对目标对象的操作可以理解为终端中的一个图像处理应用对待处理图像的预览图像的处理。
S102、获取与当前帧图像对应的第一镜头参数。
终端在进行图像预览时,获取当前帧图像之后,由于该终端获取的当前帧图像的RAW数据是需要进行图像信号处理的,具体的,终端可以对当前帧图像的亮度衰减进行校准,采用镜头均匀性补偿算法(LSC,Lens Shading Correction)进行图像信号处理的亮度衰减,并继续进行降噪过程。
在本发明实施例中,第一镜头参数包括:第一镜头均匀性特性参数和第一镜头均匀性补偿参数。
需要说明的是,本发明实施例中采用LSC对当前帧图像进行图像处理或图像信号处理的时候,是对不同帧图像(可以理解为不同时刻的当前帧图像)进行亮度补偿,即对亮度进行增益处理,如图6所示,终端对当前帧图像的图像中心的亮度增益值较小(例如增益1倍),而当前帧图像的图像四周的增益值较大(例如,增益2倍)。因此,终端进行ISP处理时,该终端可以获取当前帧图像在进行LSC之前的第一镜头均匀特性参数,以及在进行了LSC之后的第一镜头均匀性补偿参数了。具体的,终端可以通过lens shading特性曲线和LSC特性曲线来获取(如图5和6所示)。
在本发明实施例中,在LSC特性曲线中,终端通过参数可以设置图像四周均匀性的比例和图像中心均匀性的比例,以及曲线拐点的位置,即校准之后的图像并不一定中心亮度和四角亮度完全一致,而是也可以调整的,因此,终端需要记录校准前后的lens shading特性曲线,并通过对比lens shading特性曲线得到LSC特性曲线;或者从ISP LSC算法中直接获取LSC特性曲线,从而使得终端获取了与该当前帧图像对应的第一镜头均匀性特性参数和第一镜头均匀性补偿参数本发明实施例不作限制。
S103、根据第一镜头参数,确定当前帧图像的第一降噪系数。
终端在了获取与当前帧图像对应的第一镜头参数之后,该终端就可以在考虑第一镜头参数的情况下,来确定当前帧图像的第一降噪系数了。
具体的,在本发明实施例中,终端根据第一镜头参数,确定当前帧图像的第一降噪系数的过程可以为:终端将当前帧图像划分为N个区域对应的N个第一图像,其中,N为大于1的自然数;终端根据第一镜头参数(具体为第一镜头均匀性补偿参数),确定N个第一图像分别对应的N个第三降噪系数,将N个第三降噪系数确定为当前帧图像对应的第一降噪系数,其中,该N个第一图像与N个第三降噪系数一一对应。而终端根据第一镜头参数(具体为第一镜头均匀性补偿参数),确定N个第一图像分别对应的N个第三降噪系数的过程具体为:终端计算每个第一图像的中心点与当前帧图像的中心点的第一距离;然后,终端根据第一距离和第一镜头参数,确定每个第一图像对应的每个第一增益值;最后,终端可以根据每个第一增益值转换成每个第一图像对应的第三降噪系数,直至得到N个第三降噪系数。
需要说明的是,在本发明实施例中,由于当前帧图像的LSC特性曲线表示的是增益值与当前帧图像的不同位置距当前帧图像中心的距离,在本发明实施例中,终端将当前帧图像划分为N个区域后,以每个区域的中心点位置作为每个区域在当前帧图像中的位置,因此,终端就可以通过第一距离和LSC特性曲线表示的第一镜头均匀性补偿参数,确定出每个区域对应的每个第一图像对应的每个第一增益值了,该终端可以得到N个第一增益值,每个第一增益值与每个第一图像一一对应。
在本发明实施例中,终端将当前帧图像划分成的N个区域可以是矩形区域,也就是说,终端可以将当前帧图像划分为m×n=N个矩形区域。
示例性的,终端将图像分成m*n个区域,计算每个区域的中心点与当前帧图像中心点的第一距离;并通过查表或者函数计算法在当前帧图像的LSC曲线中找到对应每个第一距离进行增加的每个第一增益值;如下:
(1)、终端将整个图像分成m*n个区域,具体区域表示如下:Ration0,0、Ration0,1、Ration0,2、……、Rationm-1,n-1,m和n的值可以自行设定;以当前帧图像的图像中心为圆心,计算每个区域的中心位置距离该图像中心位置的第一距离,记录为:Dis.Ration0,0、Dis.Ration0,1、Dis.Ration0,2、……、Dis.Rationm-1,n-1;
(2)、终端根据第一距离,通过查表法在当前帧图像的LSC曲线中找到每个区域在LSC算法中增加的增益值:gain.Ration0,0、gain.Ration0,1、gain.Ration0,2、……、gain.Rationm-1,n-1。其中,查表法:首先将LSC曲线抽点采样,得到一个二维图表(距离和增益值的二维图表),然后根据每个Dis.Region在图表中查找对应的gain.Region;当某个Dis.Region处于两个DIS中间位置时,采用线性插值得到该Dis对应的gain。
(3)、终端将增益值转换成降噪系数:ratio.Ration0,0、ratio.Ration0,1、ratio.Ration0,2、……、ratio.Rationm-1,n-1;首先以图像传感器的min gain和max gain为行坐标,根据不同gain对应的噪点强弱程度设定降噪等级,生成一个二维图表(gain和ratio的二维图表),因为不同亮度环境下LSC可以设置不同的校正等级,所以二维图表可以分为bright light、normal light和lowlight三种情况或者更细分类。终端可以根据每个gain.Region在二维图表中查找对应的ratio.Region;当某个ratio.Region处于两个ratio中间位置时,终端采用线性插值得到该gain对应的ratio。这样终端就可以根据第一镜头均匀性补偿参数,确定当前帧图像的第一降噪系数了。
表1
其中,表1为增益1倍时,距离和增益值的二维图表和gain和ratio的二维图表的组合图表。
S104、根据第一降噪系数对当前帧图像进行降噪处理。
终端确定当前帧图像的第一降噪系数之后,该终端就可以根据第一降噪系数对当前帧图像进行降噪处理了。
具体的,终端就可以根据N个第三降噪系数对N个第一图像分别进行降噪处理,其中,该N个第三降噪系数与该N个第一图像一一对应。
示例性的,终端可以使用获得的第一降噪系数来调整当前帧图像对应的各个区域的降噪等级了,即确定每个区域的第三降噪系数,降噪等级可以表示为:noise.Ration0,0、noise.Ration0,1、noise.Ration0,2……noise.Rationm-1,n-1。这样终端就根据降噪等级对应的降噪数据进行降噪处理了。
需要说明的是,在本发明实施例中,由于终端在获取当前帧图像的时候,可以根据上一帧图像的变化,调整对当前帧图像的降噪系数,从而实现对不同帧图像的差异化进行图像降噪处理,进而经图像降噪后提高了图像质量。
实施例二
本发明实施例提供了一种图像降噪方法,如图7所示,该方法可以包括:
S201、获取当前帧图像。
在本发明实施例中,“终端获取当前帧图像”的过程与前述实施例中的S101的描述一致,此处不再赘述。
S202、获取与当前帧图像对应的第一镜头参数。
在本发明实施例中,“终端获取与当前帧图像对应的第一镜头参数”的过程与前述实施例中的S102的描述一致,此处不再赘述。
S203、获取上一帧图像对应的第二镜头均匀性特性参数。
S204、根据预设容忍阈值,判断第一镜头均匀性特性参数和第二镜头均匀性特性参数是否存在差异,其中,第一镜头参数包括:第一镜头均匀性特性参数和第一镜头均匀性补偿参数。
S205、若判断出存在差异,则根据第一镜头均匀性补偿参数,确定当前帧图像的第一降噪系数。
终端获取上一帧图像对应的第二镜头均匀性特性参数,并根据预设容忍阈值、第二镜头均匀性特性参数、第一镜头均匀性特性参数和第一镜头均匀性补偿参数,确定当前帧图像的第一降噪系数。
具体的,终端在获取与该当前帧图像对应的第一镜头均匀性特性参数和第一镜头均匀性补偿参数(即第一镜头参数)之后,由于该终端在实时的获取当前帧图像,并且对每帧图像的处理方式都是一样的,因此,在终端获取最新的当前帧图像时,该终端也可以通过同样的方式获取到上一帧图像对应的第二镜头均匀性特性参数。这样,终端就可以通过第一镜头均匀性特性参数、第二镜头均匀性特性参数和预设容忍阈值可以判断出上一帧图像与当前帧图像是否存在差异。然后,终端可以根据判断差异的结果,确定是通过第一镜头均匀性补偿参获取第一降噪系数对当前帧图像进行降噪,还是获取上一帧图像的降噪系数作为第一降噪系数对当前帧图像进行降噪。终端可以根据预设容忍阈值,判断第一镜头均匀性特性参数和第二镜头均匀性特性参数是否存在差异。若判断出存在差异,终端则根据第一镜头均匀性补偿参数,确定当前帧图像的第一降噪系数。
更具体的,在本发明实施例中,终端根据第一镜头均匀性补偿参数,确定当前帧图像的第一降噪系数的过程可以为:终端将当前帧图像划分为N个区域对应的N个第一图像,其中,N为大于1的自然数;终端根据第一镜头均匀性补偿参数,确定N个第一图像分别对应的N个第三降噪系数,将N个第三降噪系数确定为当前帧图像对应的第一降噪系数,其中,该N个第一图像与N个第三降噪系数一一对应。而终端根据第一镜头均匀性补偿参数,确定N个第一图像分别对应的N个第三降噪系数的过程具体为:终端计算每个第一图像的中心点与当前帧图像的中心点的第一距离;然后,终端根据第一距离和第一镜头均匀性补偿参数,确定每个第一图像对应的每个第一增益值;最后,终端可以根据每个第一增益值转换成每个第一图像对应的第三降噪系数,直至得到N个第三降噪系数。
需要说明的是,在本发明实施例中,由于当前帧图像的LSC特性曲线表示的是增益值与当前帧图像的不同位置距当前帧图像中心的距离,在本发明实施例中,终端将当前帧图像划分为N个区域后,以每个区域的中心点位置作为每个区域在当前帧图像中的位置,因此,终端就可以通过第一距离和LSC特性曲线表示的第一镜头均匀性补偿参数,确定出每个区域对应的每个第一图像对应的每个第一增益值了,该终端可以得到N个第一增益值,每个第一增益值与每个第一图像一一对应。
在本发明实施例中,终端将当前帧图像划分成的N个区域可以是矩形区域,也就是说,终端可以将当前帧图像划分为m×n=N个矩形区域。
示例性的,终端将图像分成m*n个区域,计算每个区域的中心点与当前帧图像中心点的第一距离;并通过查表或者函数计算法在当前帧图像的LSC曲线中找到对应每个第一距离进行增加的每个第一增益值;如下:
(1)、终端将整个图像分成m*n个区域,具体区域表示如下:Ration0,0、Ration0,1、Ration0,2、……、Rationm-1,n-1,m和n的值可以自行设定;以当前帧图像的图像中心为圆心,计算每个区域的中心位置距离该图像中心位置的第一距离,记录为:Dis.Ration0,0、Dis.Ration0,1、Dis.Ration0,2、……、Dis.Rationm-1,n-1;
(2)、终端根据第一距离,通过查表法在当前帧图像的LSC曲线中找到每个区域在LSC算法中增加的增益值:gain.Ration0,0、gain.Ration0,1、gain.Ration0,2、……、gain.Rationm-1,n-1。其中,查表法:首先将LSC曲线抽点采样,得到一个二维图表(距离和增益值的二维图表),然后根据每个Dis.Region在图表中查找对应的gain.Region;当某个Dis.Region处于两个DIS中间位置时,采用线性插值得到该Dis对应的gain。
(3)、终端将增益值转换成降噪系数:ratio.Ration0,0、ratio.Ration0,1、ratio.Ration0,2、……、ratio.Rationm-1,n-1;首先以图像传感器的min gain和max gain为行坐标,根据不同gain对应的噪点强弱程度设定降噪等级,生成一个二维图表(gain和ratio的二维图表),因为不同亮度环境下LSC可以设置不同的校正等级,所以二维图表可以分为bright light、normal light和lowlight三种情况或者更细分类。终端可以根据每个gain.Region在二维图表中查找对应的ratio.Region;当某个ratio.Region处于两个ratio中间位置时,终端采用线性插值得到该gain对应的ratio。这样终端就可以根据第一镜头均匀性补偿参数,确定当前帧图像的第一降噪系数了。
表1
其中,表1为增益1倍时,距离和增益值的二维图表和gain和ratio的二维图表的组合图表。
进一步地,在本发明实施例中,由于终端根据第二镜头均匀性特性参数还可以获取到与上一帧图像对应的第二镜头均匀性补偿参数或是直接通过算法获取到第二镜头均匀性补偿参数,因此,终端还可以通过第一镜头均匀性补偿参数、第二镜头均匀性补偿参数和预设容忍阈值可以判断出上一帧图像与当前帧图像是否存在差异。本发明实施例不限制判断上一帧图像与当前帧图像是否存在差异的方式。
需要说明的是,在本发明实施例中,终端可以忽略上一帧图像与当前帧图像的微小亮度差异或区别,因此,设置预设容忍阈值来进行上一帧图像与当前帧图像的差异明显的情况。
可选的,在本发明实施例中,预设容忍阈值可以预先设好,也可以根据用户需求进行相应的调整,预设容忍阈值可经过实验结果得到,不宜设置的过大或过小,由于预设容忍阈值设置过大,则相邻两帧图像对应的特性曲线发生一定程度的变化时,不会实时确定新的降噪系数;如果预设容忍阈值设置过小,则相邻两帧数据之间微小的变化也会重新更新降噪系数,使得图像处理数据较大,耗时较长。
S206、若判断出未存在差异,则获取上一帧图像对应的第二降噪系数,将该第二降噪系数确定为第一降噪系数。
终端在获取与该当前帧图像对应的第一镜头参数之后,由于该终端在实时的获取当前帧图像,并且对每帧图像的处理方式都是一样的,因此,在终端获取最新的当前帧图像时,该终端也可以通过同样的方式获取到上一帧图像对应的第二镜头均匀性特性参数。这样,终端就可以通过第一镜头均匀性特性参数、第二镜头均匀性特性参数和预设容忍阈值可以判断出上一帧图像与当前帧图像是否存在差异。然后,终端可以根据判断差异的结果,确定是通过第一镜头均匀性补偿参获取第一降噪系数对当前帧图像进行降噪,还是获取上一帧图像的降噪系数作为第一降噪系数对当前帧图像进行降噪。
具体的,终端可以根据预设容忍阈值,判断第一镜头均匀性特性参数和第二镜头均匀性特性参数是否存在差异。若判断出未存在差异,则表明终端目前使用的降噪系数,即上一帧图像的降噪系数是可以继续使用的,也就是说,终端可以获取上一帧图像对应的第二降噪系数,将该第二降噪系数确定为第一降噪系数。
S207、根据第一降噪系数对当前帧图像进行降噪处理。
终端确定了第一降噪系数之后,该终端就可以根据N个第三降噪系数对N个第一图像分别进行降噪处理,其中,该N个第三降噪系数与该N个第一图像一一对应。
示例性的,终端可以使用获得的第一降噪系数来调整当前帧图像对应的各个区域的降噪等级了,即确定每个区域的第三降噪系数,降噪等级可以表示为:noise.Ration0,0、noise.Ration0,1、noise.Ration0,2……noise.Rationm-1,n-1。这样终端就根据降噪等级对应的降噪数据进行降噪处理了。
需要说明的是,在本发明实施例中,由于终端在获取当前帧图像的时候,可以根据上一帧图像的变化,调整对当前帧图像的降噪系数,从而实现对不同帧图像的差异化进行图像降噪处理,进而经图像降噪后提高了图像质量。
实施例三
如图8所示,本发明实施例提供了一种终端1,该终端1可以包括:
获取单元10,用于获取当前帧图像;及获取与所述当前帧图像对应的第一镜头参数;
确定单元11,用于根据所述第一镜头参数,确定所述当前帧图像的第一降噪系数。
降噪单元12,用于根据所述第一降噪系数对所述当前帧图像进行降噪处理。
可选的,基于图8,如图9所示,所述终端1还包括:判断单元13。
所述获取单元,还用于获取上一帧图像对应的第二镜头均匀性特性参数。
所述判断单元13,用于根据预设容忍阈值,判断所述第一镜头均匀性特性参数和所述第二镜头均匀性特性参数是否存在差异,所述第一镜头参数包括:第一镜头均匀性特性参数和第一镜头均匀性补偿参数。
所述确定单元11,具体用于若判断出存在差异,或者,以及若判断出未存在差异,则获取所述上一帧图像对应的第二降噪系数,将所述第二降噪系数确定为所述第一降噪系数。
可选的,基于图9,如图10所示,所述终端1还包括:划分单元14。
所述划分单元14,用于将所述当前帧图像划分为N个区域对应的N个第一图像。
所述确定单元11,还具体用于根据所述第一镜头参数,确定所述N个第一图像分别对应的N个第三降噪系数,将所述N个第三降噪系数确定为所述当前帧图像对应的所述第一降噪系数,其中,所述N个第一图像与所述N个第三降噪系数一一对应。
可选的,基于图10,如图11所示,所述终端1还包括:计算单元15和转换单元16。
所述计算单元15,用于计算每个第一图像的中心点与所述当前帧图像的中心点的第一距离。
所述确定单元11,还具体用于根据所述第一距离和所述第一镜头参数,确定所述每个第一图像对应的每个第一增益值。
所述转换单元16,用于根据所述每个第一增益值转换成所述每个第一图像对应的第三降噪系数,直至得到所述N个第三降噪系数。
可选的,所述降噪单元12,具体用于根据所述N个第三降噪系数对所述N个第一图像分别进行降噪处理,其中,所述N个第三降噪系数与所述N个第一图像一一对应。
如图12所示,在实际应用中,上述获取单元10、确定单元11,降噪单元12、判断单元13、划分单元14、计算单元15和转换单元16可由位于第一终端上的处理器17实现,具体为中央处理器(CPU)、微处理器(MPU)、数字信号处理器(DSP)或现场可编程门阵列(FPGA)等实现,上述第一终端还包括:存储介质18实现,该存储介质18可以通过系统总线19与处理器17连接,其中,存储介质18用于存储可执行程序代码,该程序代码包括计算机操作指令,存储介质18可能包含高速RAM存储器,也可能还包括非易失性存储器,例如,至少一个磁盘存储器。
需要说明的是,在本发明实施例中,由于终端在获取当前帧图像的时候,可以根据上一帧图像的变化,调整对当前帧图像的降噪系数,从而实现对不同帧图像的差异化进行图像降噪处理,进而经图像降噪后提高了图像质量。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。
Claims (10)
1.一种图像降噪方法,其特征在于,包括:
获取当前帧图像;
获取与所述当前帧图像对应的第一镜头参数;
根据所述第一镜头参数,确定所述当前帧图像的第一降噪系数;
根据所述第一降噪系数对所述当前帧图像进行降噪处理。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一镜头参数,确定所述当前帧图像的第一降噪系数,包括:
将所述当前帧图像划分为N个区域对应的N个第一图像,其中,N为大于1的自然数;
根据所述第一镜头参数,确定所述N个第一图像分别对应的N个第三降噪系数,将所述N个第三降噪系数确定为所述当前帧图像对应的所述第一降噪系数,其中,所述N个第一图像与所述N个第三降噪系数一一对应。
3.根据权利要求2所述的方法,其特征在于,所述根据所述第一镜头均匀性特性参数和所述第一镜头参数,确定所述N个第一图像分别对应的N个第三降噪系数,包括:
计算每个第一图像的中心点与所述当前帧图像的中心点的第一距离;
根据所述第一距离和所述第一镜头参数,确定所述每个第一图像对应的每个第一增益值;
根据所述每个第一增益值转换成所述每个第一图像对应的第三降噪系数,直至得到所述N个第三降噪系数。
4.根据权利要求2或3所述的方法,其特征在于,所述根据所述第一降噪系数对所述当前帧图像进行降噪处理,包括:
根据所述N个第三降噪系数对所述N个第一图像分别进行降噪处理,其中,所述N个第三降噪系数与所述N个第一图像一一对应。
5.根据权利要求1所述的方法,其特征在于,所述根据所述第一镜头参数,确定所述当前帧图像的第一降噪系数,包括:
获取上一帧图像对应的第二镜头均匀性特性参数;
根据预设容忍阈值,判断第一镜头均匀性特性参数和所述第二镜头均匀性特性参数是否存在差异;所述第一镜头参数包括:第一镜头均匀性特性参数和第一镜头均匀性补偿参数;
若判断出存在差异,则根据所述第一镜头均匀性补偿参数,确定所述当前帧图像的第一降噪系数;
若判断出未存在差异,则获取所述上一帧图像对应的第二降噪系数,将所述第二降噪系数确定为所述第一降噪系数。
6.一种终端,其特征在于,包括:
获取单元,用于获取当前帧图像;及获取与所述当前帧图像对应的第一镜头参数;
确定单元,用于根据所述第一镜头参数,确定所述当前帧图像的第一降噪系数;
降噪单元,用于根据所述第一降噪系数对所述当前帧图像进行降噪处理。
7.根据权利要求6所述的终端,其特征在于,所述终端还包括:划分单元;
所述划分单元,用于将所述当前帧图像划分为N个区域对应的N个第一图像,其中,N为大于1的自然数;
所述确定单元,具体用于根据所述第一镜头参数,确定所述N个第一图像分别对应的N个第三降噪系数,将所述N个第三降噪系数确定为所述当前帧图像对应的所述第一降噪系数,其中,所述N个第一图像与所述N个第三降噪系数一一对应。
8.根据权利要求7所述的终端,其特征在于,所述终端还包括:计算单元和转换单元;
所述计算单元,用于计算每个第一图像的中心点与所述当前帧图像的中心点的第一距离;
所述确定单元,还具体用于根据所述第一距离和所述第一镜头参数,确定所述每个第一图像对应的每个第一增益值;
所述转换单元,用于根据所述每个第一增益值转换成所述每个第一图像对应的第三降噪系数,直至得到所述N个第三降噪系数。
9.根据权利要求7或8所述的终端,其特征在于,
所述降噪单元,具体用于根据所述N个第三降噪系数对所述N个第一图像分别进行降噪处理,其中,所述N个第三降噪系数与所述N个第一图像一一对应。
10.根据权利要求6所述的终端,其特征在于,所述终端还包括:判断单元;
所述获取单元,还用于获取上一帧图像对应的第二镜头均匀性特性参数;
所述判断单元,用于根据预设容忍阈值,判断所述第一镜头均匀性特性参数和所述第二镜头均匀性特性参数是否存在差异;所述第一镜头参数包括:第一镜头均匀性特性参数和第一镜头均匀性补偿参数;
所述确定单元,具体用于若判断出存在差异,则根据所述第一镜头均匀性补偿参数,确定所述当前帧图像的第一降噪系数;或者,若判断出未存在差异,则获取所述上一帧图像对应的第二降噪系数,将所述第二降噪系数确定为所述第一降噪系数。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710106574.0A CN108513043A (zh) | 2017-02-27 | 2017-02-27 | 一种图像降噪方法及终端 |
PCT/CN2017/085512 WO2018152977A1 (zh) | 2017-02-27 | 2017-05-23 | 一种图像降噪方法及终端和计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710106574.0A CN108513043A (zh) | 2017-02-27 | 2017-02-27 | 一种图像降噪方法及终端 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108513043A true CN108513043A (zh) | 2018-09-07 |
Family
ID=63253490
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710106574.0A Pending CN108513043A (zh) | 2017-02-27 | 2017-02-27 | 一种图像降噪方法及终端 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN108513043A (zh) |
WO (1) | WO2018152977A1 (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109639932A (zh) * | 2019-02-28 | 2019-04-16 | 努比亚技术有限公司 | 图像处理方法、移动终端及计算机可读存储介质 |
CN109727211A (zh) * | 2018-12-21 | 2019-05-07 | 厦门美图之家科技有限公司 | 一种图像去噪方法、装置、计算设备及介质 |
CN110290289A (zh) * | 2019-06-13 | 2019-09-27 | Oppo广东移动通信有限公司 | 图像降噪方法、装置、电子设备以及存储介质 |
CN111131716A (zh) * | 2019-12-31 | 2020-05-08 | 联想(北京)有限公司 | 图像处理方法以及电子设备 |
CN111372014A (zh) * | 2020-03-17 | 2020-07-03 | 展讯通信(上海)有限公司 | 镜头阴影补偿方法及装置、存储介质、终端 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006295807A (ja) * | 2005-04-14 | 2006-10-26 | Canon Inc | 撮像装置、画像処理方法、プログラム、及び記憶媒体 |
CN101669142A (zh) * | 2007-04-24 | 2010-03-10 | 泰塞拉技术匈牙利有限公司 | 用于调整将核应用于信号的效果以在信号上取得预期效果的技术 |
CN102640489A (zh) * | 2009-10-20 | 2012-08-15 | 苹果公司 | 用于检测和校正图像传感器中的缺陷像素的系统和方法 |
CN103308184A (zh) * | 2013-05-13 | 2013-09-18 | 浙江大立科技股份有限公司 | 红外焦平面阵列探测器单元、红外成像系统及校正方法 |
CN104869287A (zh) * | 2015-05-18 | 2015-08-26 | 成都平行视野科技有限公司 | 基于移动设备gpu和角速度传感器的视频拍摄降噪方法 |
CN105005973A (zh) * | 2015-06-30 | 2015-10-28 | 广东欧珀移动通信有限公司 | 一种图像快速去噪的方法及装置 |
CN106231211A (zh) * | 2016-08-31 | 2016-12-14 | 宁波优而雅电器有限公司 | 一种红外摄像方法 |
-
2017
- 2017-02-27 CN CN201710106574.0A patent/CN108513043A/zh active Pending
- 2017-05-23 WO PCT/CN2017/085512 patent/WO2018152977A1/zh active Application Filing
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006295807A (ja) * | 2005-04-14 | 2006-10-26 | Canon Inc | 撮像装置、画像処理方法、プログラム、及び記憶媒体 |
CN101669142A (zh) * | 2007-04-24 | 2010-03-10 | 泰塞拉技术匈牙利有限公司 | 用于调整将核应用于信号的效果以在信号上取得预期效果的技术 |
CN102640489A (zh) * | 2009-10-20 | 2012-08-15 | 苹果公司 | 用于检测和校正图像传感器中的缺陷像素的系统和方法 |
CN103308184A (zh) * | 2013-05-13 | 2013-09-18 | 浙江大立科技股份有限公司 | 红外焦平面阵列探测器单元、红外成像系统及校正方法 |
CN104869287A (zh) * | 2015-05-18 | 2015-08-26 | 成都平行视野科技有限公司 | 基于移动设备gpu和角速度传感器的视频拍摄降噪方法 |
CN105005973A (zh) * | 2015-06-30 | 2015-10-28 | 广东欧珀移动通信有限公司 | 一种图像快速去噪的方法及装置 |
CN106231211A (zh) * | 2016-08-31 | 2016-12-14 | 宁波优而雅电器有限公司 | 一种红外摄像方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109727211A (zh) * | 2018-12-21 | 2019-05-07 | 厦门美图之家科技有限公司 | 一种图像去噪方法、装置、计算设备及介质 |
CN109639932A (zh) * | 2019-02-28 | 2019-04-16 | 努比亚技术有限公司 | 图像处理方法、移动终端及计算机可读存储介质 |
CN110290289A (zh) * | 2019-06-13 | 2019-09-27 | Oppo广东移动通信有限公司 | 图像降噪方法、装置、电子设备以及存储介质 |
CN110290289B (zh) * | 2019-06-13 | 2021-07-09 | Oppo广东移动通信有限公司 | 图像降噪方法、装置、电子设备以及存储介质 |
CN111131716A (zh) * | 2019-12-31 | 2020-05-08 | 联想(北京)有限公司 | 图像处理方法以及电子设备 |
CN111131716B (zh) * | 2019-12-31 | 2021-06-15 | 联想(北京)有限公司 | 图像处理方法以及电子设备 |
CN111372014A (zh) * | 2020-03-17 | 2020-07-03 | 展讯通信(上海)有限公司 | 镜头阴影补偿方法及装置、存储介质、终端 |
CN111372014B (zh) * | 2020-03-17 | 2022-04-22 | 展讯通信(上海)有限公司 | 镜头阴影补偿方法及装置、存储介质、终端 |
Also Published As
Publication number | Publication date |
---|---|
WO2018152977A1 (zh) | 2018-08-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20240137658A1 (en) | Global tone mapping | |
US9842381B2 (en) | Global tone mapping | |
CN108513043A (zh) | 一种图像降噪方法及终端 | |
US8890974B2 (en) | Methods and systems for automatic white balance | |
US7460728B2 (en) | Image processing apparatus and method, recording medium, and program | |
US8363131B2 (en) | Apparatus and method for local contrast enhanced tone mapping | |
US9113114B2 (en) | Apparatus and method for automatically controlling image brightness in image photographing device | |
US8208039B2 (en) | Image processing apparatus and computer-readable medium | |
US7710470B2 (en) | Image processing apparatus that reduces noise, image processing method that reduces noise, electronic camera that reduces noise, and scanner that reduces noise | |
CN107925751A (zh) | 用于多视点降噪和高动态范围的系统和方法 | |
US8120658B2 (en) | Hand jitter reduction system for cameras | |
US8610801B2 (en) | Image processing apparatus including chromatic aberration correcting circuit and image processing method | |
CN102783135A (zh) | 利用低分辨率图像提供高分辨率图像的方法和装置 | |
US9113085B2 (en) | Apparatus for controlling exposure amount of an imaging device | |
US8810693B2 (en) | Image processing apparatus and method thereof | |
WO2019104047A1 (en) | Global tone mapping | |
EP2070312A1 (en) | A hand jitter reduction system for cameras | |
US20090153696A1 (en) | Chromatic aberration correction apparatus, image pickup apparatus, chromatic aberration amount calculation method, and chromatic aberration amount calculation program | |
JP2011223452A (ja) | 色補正装置 | |
Brown | Color processing for digital cameras | |
JP2006333113A (ja) | 撮像装置 | |
JP2016040870A (ja) | 画像処理装置、像形成方法およびプログラム | |
KR101065223B1 (ko) | 이미지 센서 및 렌즈 쉐이딩 보정 방법 | |
JP2012134736A (ja) | 撮像装置 | |
JP2006050155A (ja) | 画像の鮮鋭化装置および方法、画像の鮮鋭化装置を用いた電子機器及び鮮鋭化プログラム、及びそのプログラムを記録した記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180907 |
|
RJ01 | Rejection of invention patent application after publication |