发明内容
本发明实施例提供一种图像降噪的方法及终端,可以提高对图像进行降噪的降噪效果和效率。
第一方面,本发明实施例提供了一种图像降噪的方法,所述方法包括:
获取图像的图像数据;
对所述图像数据的亮度分量y、色度分量u和v三个分量中的至少一个分量进行小波分解,得到每个分量的高频小波系数和低频小波系数;
对所述每个分量的低频小波系数进行递归降噪,得到所述每个分量降噪后的低频小波系数;
根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量;
当所述降噪后的至少一个分量为三个分量时,将所述降噪后的三个分量组合,得到降噪后的图像数据;
当所述降噪后的至少一个分量为一个或两个分量时,将所述降噪后的至少一个分量与所述三个分量中的其他分量组合,得到降噪后的图像数据。
结合第一方面,在第一方面的第一种实施方式中,所述方法还包括:
对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪;
所述对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪包括:
根据如下公式,对所述每个分量的高频小波系数进行降噪,
y=αx+(1-α)h(x),其中α是与边缘强度相关的参数,h(x)是关于x的衰减函数;
根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量,具体为:
根据所述每个分量降噪后的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的所述至少一个分量。
结合第一方面,在第一方面的第二种实施方式中,所述对所述图像数据的亮度分量y、色度分量u和v三个分量中的至少一个分量进行小波分解,得到每个分量的高频小波系数和低频小波系数,包括:
对所述图像数据的亮度分量y、色度分量u和v三个分量中的至少一个分量进行n层小波分解,得到每个分量的n层高频小波系数和n层低频小波系数,其中n≥2,n为整数;
所述对所述每个分量的低频小波系数进行递归降噪,得到所述每个分量降噪后的低频小波系数,根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量包括:
对所述每个分量进行如下处理:
A:对第n层的低频小波系数进行递归降噪,得到第n层降噪后的低频小波系数,根据所述第n层降噪后的低频小波系数与第n层的高频小波系数进行小波重构,得到第n-1层降噪后的的低频小波系数;
B:对第i层降噪后的低频小波系数进行递归降噪,得到第i层二次降噪后的低频小波系数,其中1≤i≤n-1,i为变量,i为整数,i初始值为n-1;
C:
当i>1时,根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构,得到第i-1层降噪后的低频小波系数,对i进行赋值,令i=i-1;,返回步骤B;
当i=1时,根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构,得到降噪后的一个分量。
结合第一方面的第二种实施方式,在第一方面的第三种实施方式中,所述方法还包括:对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪;
所述对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪包括:
根据如下公式,对所述每个分量的所述n层的每一层高频小波系数进行降噪,
yj=αjxj+(1-αj)h(xj),j≥1,j为整数;
其中,yj为第j个高频小波系数降噪后的值,xj为第j个高频小波系数的值,h(xj)是关于xj的衰减函数,αj是第j个高频小波系数所对应的像素点的边缘强度对应的边缘强度系数,0≤αj≤1。
结合第一方面的第三种实施方式,在第一方面的第四种实施方式中,所述根据所述第n层降噪后的低频小波系数与第n层的高频小波系数进行小波重构,得到第n-1层降噪后的低频小波系数,具体为:
根据所述第n层降噪后的低频小波系数与第n层降噪后的高频小波系数进行小波重构,得到第n-1层降噪后的低频小波系数;
所述根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构具体为:
根据所述第i层二次降噪后的低频小波系数与第i层降噪后的高频小波系数进行小波重构。
结合第一方面,或,第一方面的第一、第二、第三或第四种实施方式中任一种,在第一方面的第五种实施方式中,所述递归降噪,包括:
在至少一个方向上,第k个低频小波系数的降噪结果=第k个低频小波系数的值+f(第k-1个低频小波系数的降噪结果-第k个低频小波系数的值),其中k>1,k为整数,其中y=f(x)为降噪强度函数,x表示第k-1个低频小波系数的降噪结果与第k个低频小波系数的差,y表示降噪强度。
结合第一方面的第五种实施方式,在第一方面的第六种实施方式中,所述方法还包括:
在对所述第k个低频小波系数进行递归降噪后,根据如下公式,对所述第k个低频小波系数进行细节恢复;
第k个低频小波系数的细节恢复结果=第k个低频小波系数的降噪结果+g(第k个低频小波系数的值-第k个低频小波系数的降噪结果),其中y=g(x)为细节保持强度函数,x表示第k个低频小波系数的值与第k个低频小波系数的降噪结果的差,y表示细节保持强度的值。
结合第一方面的第三种或第四种实施方式,在第一方面的第七种实施方式中,所述第j个高频小波系数所对应的像素点的边缘强度包括:第j个高频小波系数所对应的像素点所对应的y、u、v三个分量中的至少一个分量所对应的边缘强度。
结合第一方面的第七种实施方式,在第一方面的第八种实施方式中,所述至少一个分量所对应的边缘强度为基于所述至少一个分量的高频小波系数和低频小波系数的边缘强度。
结合第一方面的第一种或第三种实施方式,在第一方面的第九种实施方式中,所述衰减函数为小波阈值函数,包括以下中的至少一个:硬阈值函数、软阈值函数。
结合第一方面的第五种实施方式,在第一方面的第十种实施方式中,所述至少一个方向包括以下中的至少一个:从左向右、从右向左、从上向下、从下向上。
第二方面,本发明实施例提供了一种图像降噪的终端,所述终端包括:
图像获取单元,用于获取图像的图像数据;
图像分解单元,用于对所述图像数据的亮度分量y、色度分量u和v三个分量中的至少一个分量进行小波分解,得到每个分量的高频小波系数和低频小波系数;
图像降噪处理单元,用于对所述每个分量的低频小波系数进行递归降噪,得到所述每个分量降噪后的低频小波系数,根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量;
降噪图像获取单元,用于当所述降噪后的至少一个分量为三个分量时,将所述降噪后的三个分量组合,得到降噪后的图像数据;
当所述降噪后的至少一个分量为一个或两个分量时,将所述降噪后的至少一个分量与所述三个分量中的其他分量组合,得到降噪后的图像数据。
结合第二方面,在第二方面的第一种实施方式中,所述终端还包括图像高频处理单元,用于对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪,包括根据如下公式,对所述每个分量的高频小波系数进行降噪,
y=αx+(1-α)h(x),其中α是与边缘强度相关的参数,h(x)是关于x的衰减函数;
所述图像降噪处理单元用于根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量具体为,用于根据所述每个分量降噪后的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的所述至少一个分量。
结合第二方面,在第二方面的第二种实施方式中,所述图像分解单元具体用于对所述图像数据的亮度分量y、色度分量u和v三个分量中的至少一个分量进行n层小波分解,得到每个分量的n层高频小波系数和n层低频小波系数,其中n≥2,n为整数;
所述图像降噪处理单元具体用于对所述每个分量进行如下处理:
A:对第n层的低频小波系数进行递归降噪,得到第n层降噪后的低频小波系数,根据所述第n层降噪后的低频小波系数与第n层的高频小波系数进行小波重构,得到第n-1层降噪后的的低频小波系数;
B:对第i层降噪后的低频小波系数进行递归降噪,得到第i层二次降噪后的低频小波系数,其中1≤i≤n-1,i为变量,i为整数,i初始值为n-1;
C:
当i>1时,根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构,得到第i-1层降噪后的低频小波系数,对i进行赋值,令i=i-1;,返回步骤B;
当i=1时,根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构,得到降噪后的一个分量。
结合第二方面的第二种实施方式,在第二方面的第三种实施方式中,所述终端还包括图像高频处理单元,用于对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪,包括根据如下公式,对所述每个分量的所述n层的每一层高频小波系数进行降噪,
yj=αjxj+(1-αj)h(xj),j≥1,j为整数;
其中,yj为第j个高频小波系数降噪后的值,xj为第j个高频小波系数的值,h(xj)是关于xj的衰减函数,αj是第j个高频小波系数所对应的像素点的边缘强度对应的边缘强度系数,0≤αj≤1。
结合第二方面的第三种实施方式,在第二方面的第四种实施方式中,所述图像降噪处理单元用于根据所述第n层降噪后的低频小波系数与第n层的高频小波系数进行小波重构,得到第n-1层降噪后的低频小波系数具体为,用于根据所述第n层降噪后的低频小波系数与第n层降噪后的高频小波系数进行小波重构,得到第n-1层降噪后的低频小波系数;
所述图像降噪处理单元用于根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构具体为,用于根据所述第i层二次降噪后的低频小波系数与第i层降噪后的高频小波系数进行小波重构。
结合第二方面,或第二方面的第一种、第二种、第三种或第四种实施方式中的任一种,在第二方面的第五种实施方式中,所述递归降噪,包括:
在至少一个方向上,第k个低频小波系数的降噪结果=第k个低频小波系数的值+f(第k-1个低频小波系数的降噪结果-第k个低频小波系数的值),其中k>1,k为整数,其中y=f(x)为降噪强度函数,x表示第k-1个低频小波系数的降噪结果与第k个低频小波系数的差,y表示降噪强度。
结合第二方面的第五种实施方式,在第二方面的第六种实施方式中,所述终端还包括细节恢复单元,用于在所述图像降噪处理单元对所述第k个低频小波系数进行递归降噪后,根据如下公式,对所述第k个低频小波系数进行细节恢复;
第k个低频小波系数的细节恢复结果=第k个低频小波系数的降噪结果+g(第k个低频小波系数的值-第k个低频小波系数的降噪结果),其中y=g(x)为细节保持强度函数,x表示第k个低频小波系数的值与第k个低频小波系数的降噪结果的差,y表示细节保持强度的值。
结合第二方面的第三种或第四种实施方式,在第二方面的第七种实施方式中,所述第j个高频小波系数所对应的像素点的边缘强度包括:第j个高频小波系数所对应的像素点所对应的y、u、v三个分量中的至少一个分量所对应的边缘强度。
结合第二方面的第七种实施方式,在第二方面的第八种实施方式中,所述至少一个分量所对应的边缘强度为基于所述至少一个分量的高频小波系数和低频小波系数的边缘强度。
结合第二方面的第一种或第三种实施方式,在第二方面的第九种实施方式中,所述衰减函数为小波阈值函数,包括以下中的至少一个:硬阈值函数、软阈值函数。
结合第二方面的第五种实施方式,在第二方面的第十种实施方式中,所述至少一个方向包括以下中的至少一个:从左向右、从右向左、从上向下、从下向上。
本发明实施例提供的图像降噪的方法及终端,通过对所述图像数据的y、u、v三个分量中的至少一个分量进行小波分解,对所述至少一个分量中的每个分量的低频小波系数进行递归降噪,得到所述每个分量降噪后的低频小波系数;根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量;当所述降噪后的至少一个分量为三个分量时,将所述降噪后的三个分量组合,得到降噪后的图像数据;当所述降噪后的至少一个分量为一个或两个分量时,将所述降噪后的至少一个分量与所述三个分量中的其他分量组合,得到降噪后的图像数据。通过对图像进行小波分解,对低频小波系数进行递归降噪,降低了计算的数据量,计算复杂度低,提高了图像降噪的效率,同时通过递归方式降噪利用了图像中像素点之间的关系,保证了图像降噪的效果。
实施例七
结合实施例六,在本发明提供的一种用于图像降噪的方法的另一实施例中,所述方法还可以包括:
在对所述第k个低频小波系数进行递归降噪后,根据如下公式,对所述第k个低频小波系数进行细节恢复;
第k个低频小波系数的细节恢复结果=第k个低频小波系数的降噪结果+g(第k个低频小波系数的值-第k个低频小波系数的降噪结果),其中y=g(x)为细节保持强度函数,x表示第k个低频小波系数的值与第k个低频小波系数的降噪结果的差,y表示细节保持强度的值。
通过对每一层降噪后的低频小波系数,采用细节保持强度函数进行细节恢复,得到每一层细节恢复后的低频小波系数,可以对降噪后的低频小波系数进行调整,在降噪的同时保留更多的图像细节信息。
结合实施例四或五,在本发明提供的一种用于图像降噪的方法的另一实施例中,所述第j个高频小波系数所对应的像素点的边缘强度包括:第j个高频小波系数所对应的像素点所对应的y、u、v三个分量中的至少一个分量所对应的边缘强度。
通常,由于色度分量u、v的边缘信息不稳定,且不明显,所述第j个高频小波系数所对应的像素点的边缘强度可以既包括了对应于色度分量u、v的色度边缘强度(色度分量所对应的边缘强度),又包括了对应于y分量的亮度边缘强度(亮度分量所对应的边缘强度),即可以为y、u、v三个分量所对应的边缘强度之和。在具体实现时,可以取第j个高频小波系数所对应的像素点处的色度、亮度边缘强度中的最大值(即y、u、v三个分量所对应的边缘强度中的最大值),作为所述第j个高频小波系数所对应的像素点处的边缘强度,此种情况下,是对应的y、u、v三个分量中的一个分量的边缘强度。可选的,可以选y、u、v三个分量中的一个或多个分量所对应的边缘强度作为所述第j个高频小波系数所对应的像素点的边缘强度,如可以选y、u、v三个分量中边缘强度较大的两个,将所述两个的边缘强度之和作为所述第j个高频小波系数所对应的像素点的边缘强度。
进一步地,所述至少一个分量所对应的边缘强度为基于所述至少一个分量的高频小波系数和低频小波系数的边缘强度。
示例性的,对于亮度边缘强度的计算,由于其高频小波系数和低频小波系数均包含边缘信息,所以可以对其高频小波系数和低频小波系数均提取边缘强度(边缘强度的值可以采用经典的Sobel算子、Laplace算子等来计算),然后取高频小波系数和低频小波系数的边缘强度中(包括高频小波系数HLj、LHj、HHj及低频小波系数LLj各自对应的边缘强度)的最大值作为亮度边缘强度;对于色度边缘强度的计算,可以对其高频小波系数和低频小波系数均提取边缘强度,然后取高频小波系数和低频小波系数的边缘强度中的最大值作为色度边缘强度,实际操作中,因为色度的高频小波系数一般很弱,为节省计算量,可以只提取低频部分的边缘强度作为色度边缘强度。
进一步地,前述实施例中所述衰减函数具体为小波阈值函数,可以包括以下中的至少一个:硬阈值函数、软阈值函数。具体地,所述衰减函数可以为硬阈值或软阈值函数,或者,硬阈值和软阈值相结合的衰减函数等。
进一步地,前述实施例中所述至少一个方向包括以下中的至少一个:从左向右、从右向左、从上向下、从下向上。具体的,可以对每一层的低频小波系数进行上述四个方向的递归降噪,得到该层降噪后的低频小波系数。通过进行所述四个方向的递归降噪,可以保证降噪效果的对称性,提高图像的降噪效果的同时,保证了图像的质量。
从形式上看,对每个低频小波系数的递归降噪,在四个方向上仅利用了其上、下、左、右四个低频小波系数的信息,但是通过每一个低频小波系数的递归降噪,相当于间接地利用了整幅图像的信息,相当于提高了窗口滤波的尺寸。从而,可以很好地消除大面积的噪声,而且计算复杂度低,保证了降噪效果的同时提高了降噪效率。
下面,以对一幅图像进行3层小波分解(即n=3)为例来说明本发明的一种具体实施例。以主要对该图像进行彩色噪声降噪为例,由于彩色噪声降噪可以只涉及对u、v分量的处理,而且对u、v分量的处理过程可以相同或类似,以下以对u分量的处理为例进行阐述,对v分量的处理可以参考下面的过程。
步骤一:对该图像的色度分量u分量进行3层小波分解,得到第一层低频小波系数LL1和第一层高频小波系数HL1、LH1、HH1,参见图3;得到第二层低频小波系数LL2和第二层高频小波系数HL2、LH2、HH2,参见图4;得到第三层低频小波系数LL3和第二层高频小波系数HL3、LH3、HH3,参见图5。
步骤二:对小波分解的最高层(本实施例中为第三层)低频小波系数LL3进行四个方向的递归降噪;
1)第1遍,从左到右递归降噪
在从左到右的方向上,对每一行的每一个低频小波系数,参考其左侧参考点的值,按降噪强度函数y=f(x),从左到右进行递归运算,具体规则可以如下:
对该行第一个低频小波系数:
第一个低频小波系数的降噪结果=该低频小波系数的值
对该行其他个低频小波系数:
参考点的值=左侧低频小波系数的降噪结果
该个低频小波系数的降噪结果=该个低频小波系数的值+f(参考点的值–该个低频小波系数的值)
即,在一个方向上,第一个低频小波系数的降噪结果为该低频小波系数的值,第k个低频小波系数的降噪结果=第k个低频小波系数的值+f(第k-1个低频小波系数的降噪结果-第k个低频小波系数的值),其中k>1,k为整数,其中y=f(x)为降噪强度函数,x表示第k-1个低频小波系数的降噪结果与第k个低频小波系数的差,y表示降噪强度,所述降噪强度函数为根据所述图像的噪声估计水平和/或用户对该函数的设置来确定的函数。
其中,y=f(x)可以为如图6实线所示的降噪强度函数曲线,水平轴x表示参考点的值与某个低频小波系数的差,竖直轴y表示降噪强度,可以根据所述图像的噪声估计水平按照预定规则得到该图像的若干个降噪强度,即不同的降噪等级,也可以是系统预设的或用户设定的不同的降噪等级,峰值点的位置(降噪强度最大的位置)可以根据所述图像的噪声估计水平和/或用户对该函数的设置来得到,峰值点的幅度可以是用户自由设定或设备预设的。例如,通过对所述图像的噪声水平进行估计,因为噪声最大的位置对应降噪强度的峰值,从而可以根据噪声最大的位置来确定该降噪强度函数曲线的峰值点的位置(即峰值点所对应的x值),当然也可以同时结合对所述图像的噪声估计水平和用户对该函数的设置,或者,仅根据用户对该函数的设置(如,用户选择该图像中自己感兴趣的部分来重点降噪,或者,用户根据自己的视觉感知,选择出该图像中用户认为噪声较大的需要重点降噪的部分),来得到y=f(x)函数峰值点的位置。y=f(x)函数峰值点的幅度,也即最大的降噪强度,可以是用户自由设定或设备预设的,例如,在设备上实现该方法时,设备可以根据预定的规则来设定峰值点的幅度;当然,如果降噪效果没有达到用户的预期,用户也可以通过设置来对峰值点的幅度进行调节。
在该降噪强度函数曲线中,x越趋近于两端(表示边缘越强),y越趋近于0,从而该低频小波系数的降噪结果越趋近于该低频小波系数的原始值,边缘保持越好;x越趋近于峰值点的位置,y越大,从而该低频小波系数的降噪结果越趋近于参考点,降噪强度越强。
可以将y=f(x)以LUT(Look Up Table,查找表)的形式存入内存,将y=f(x)的计算转换为一次查表操作,这样可以提高算法的速度。
2)第2遍,从上到下递归降噪
在从上到下的方向上,对每一列的每一个低频小波系数,参考其上侧参考点的值,按降噪强度函数y=f(x),从上到下进行递归运算,具体规则可以与第1遍类似。
3)第3遍,从右到左递推降噪
在从右到左的方向上,对每一行的每一个低频小波系数,参考其右侧参考点的值,按降噪强度函数y=f(x),从右到左进行递归运算,具体规则可以与第1遍类似。
4)第4遍,从下到上递归降噪
在从下到上的方向上,对每一列的每一个低频小波系数,参考其下侧参考点的值,按降噪强度函数y=f(x),从下到上进行递归运算,具体规则可以与第1遍类似。
上述1)~4)分别从四个不同方向上,对图像的第3层小波分解的低频小波系数LL3进行了递归降噪,得到了第3层降噪后的低频小波系数。其中,上述四个方向在执行时的顺序(也即第1遍~第4遍在执行时的顺序)可以根据需要进行调整,本发明对此不作限定,本发明实施例仅例举了其中一种情况。本发明实施例例举的是4个方向的递归降噪,方向的多少可以根据需要而不同,如可以仅对2个方向上进行递归降噪(如对称的两个方向:从左到右和从右到左),也可以有更多的方向,如斜对角方向上也可以形成四个方向:左下到右上,右上到左下,左上到右下,右下到左上。
经过上述1)~4)4遍操作后,从形式上看,对每个低频小波系数的降噪滤波,仅利用了其上、下、左、右四个低频小波系数的信息,但是实际上间接地利用了整幅图像的信息,相当于提高了窗口滤波的尺寸,从而,可以很好地消除图像中存在的大面结的片状彩色噪声,而且计算复杂度低。
可选的,在对图像的第3层小波分解的低频小波系数LL3进行了上述递归降噪后,还可以参考该图像第3层原始的低频小波系数和细节保持强度函数,对所述得到的第3层降噪后的低频小波系数进行细节恢复,具体如下:
5)第5遍,参考该图像原始的低频小波系数进行细节恢复
在对所述第k个低频小波系数进行递归降噪后,根据如下公式,对所述第k个低频小波系数进行细节恢复;
第k个低频小波系数的细节恢复结果=第k个低频小波系数的降噪结果+g(第k个低频小波系数的值-第k个低频小波系数的降噪结果),其中y=g(x)为细节保持强度函数,x表示第k个低频小波系数的值与第k个低频小波系数的降噪结果的差,y表示细节保持强度的值。
其中,y=g(x)可以为如图6虚线所示的细节保持强度函数曲线,水平轴x表示所述图像第k个低频小波系数的值与第k个低频小波系数的降噪结果的差,竖直轴y表示细节保持强度,可以根据所述图像的噪声估计水平按照预定规则得到该图像的若干个细节保持强度,即不同的细节保持等级,也可以是系统预设的或用户设定的不同的细节保持等级,所述细节保持强度函数为根据所述降噪强度函数和/或用户对该函数的设置来确定的函数。例如,其峰值点的位置(细节保持强度最大的位置)可以根据所述图像的噪声估计水平和/或用户对该函数的设置来得到,峰值点的幅度可以是用户自由设定或设备预设的。例如,通过对所述图像的噪声水平进行估计,因为噪声最大的位置对应降噪强度的峰值,可能损失较多图像的细节,从而可以根据噪声最大的位置来确定细节保持强度函数曲线的峰值点的位置(即峰值点所对应的x值),当然也可以同时结合对所述图像的噪声估计水平和用户对该函数的设置,或者,仅根据用户对该函数的设置(如,用户选择该图像中自己感兴趣的部分来重点进行细节恢复,或者,用户根据自己的视觉感知,选择出该图像中用户认为细节损失较大的需要重点进行细节恢复的部分),来得到y=g(x)函数峰值点的位置。y=g(x)函数峰值点的幅度,也即最大的细节保持强度,可以是用户自由设定或设备预设的,例如,在设备上实现该方法时,设备可以根据预定的规则来设定峰值点的幅度,所述预定的规则可以是与所述y=f(x)函数峰值点的幅度之间预定的数量关系,即可以根据y=f(x)函数峰值点的幅度来确定y=g(x)函数峰值点的幅度,如图6中所示,y=g(x)函数峰值点的幅度约为y=f(x)函数峰值点的幅度的1/2;当然,如果细节恢复效果没有达到用户的预期,用户也可以通过设置来对y=g(x)函数峰值点的幅度进行调节。
同理,也可以将y=g(x)以LUT的形式存入内存,将y=g(x)的计算转换为一次查表操作,以提高算法速度。
步骤三:对第三层高频小波系数HL3、LH3、HH3进行基于边缘信息的衰减函数降噪;
所述基于边缘信息的衰减函数降噪包括按如下公式对该层的高频小波系数进行降噪:
yj=αjxj+(1-αj)h(xj),j≥1,j为整数;
其中,yj为第j个高频小波系数降噪后的值,xj为第j个高频小波系数的值,h(xj)是关于xj的衰减函数,αj是第j个高频小波系数所对应的像素点的边缘强度对应的边缘强度系数,0≤αj≤1。像素点的边缘强度越大,αj越趋近于1,从而yj越趋近于xj,边缘保持越好;像素点的边缘强度越小,αj越趋近于0,从而yj越趋近于h(xj),降噪效果越好。αj可以是第j个高频小波系数所对应的像素点的边缘强度进行归一化处理后得到的值。
其中,所述第j个高频小波系数所对应的像素点的边缘强度可以包括:第j个高频小波系数所对应的像素点所对应的y、u、v三个分量中的至少一个分量所对应的边缘强度。
如,在本发明的一个实施例中,色度分量u、v的边缘信息可能不稳定,或不明显,这种情况下,所述第j个高频小波系数所对应的像素点的边缘强度可以既包括了对应于色度分量u、v的色度边缘强度(色度分量所对应的边缘强度),又包括了对应于y分量的亮度边缘强度(亮度分量所对应的边缘强度),即可以为y、u、v三个分量所对应的边缘强度之和。在具体实现时,可以取第j个高频小波系数所对应的像素点处的色度、亮度边缘强度中的最大值(即y、u、v三个分量所对应的边缘强度中的最大值),作为所述第j个高频小波系数所对应的像素点处的边缘强度,此种情况下,是对应的y、u、v三个分量中的一个分量的边缘强度。可选的,可以选y、u、v三个分量中的一个或多个分量所对应的边缘强度作为所述第j个高频小波系数所对应的像素点的边缘强度,如可以选y、u、v三个分量中边缘强度较大的两个,将所述两个的边缘强度之和作为所述第j个高频小波系数所对应的像素点的边缘强度。本实施例在对图像的高频小波系数降噪时,参考了亮度和色度的边缘信息,因此,在滤除高频噪声的同时,仍然可以较好地保留图像的细节信息。
可选的,所述至少一个分量所对应的边缘强度可以为基于所述至少一个分量的高频小波系数和低频小波系数的边缘强度。对于一个分量,其高频小波系数和低频小波系数均包含边缘信息,可以对高频小波系数和低频小波系数均提取边缘强度,基于高频小波系数和低频小波系数的边缘强度,来得到该分量对应的边缘强度。例如,对于亮度边缘强度的计算,由于其高频小波系数和低频小波系数均包含边缘信息,可以对高频小波系数和低频小波系数均提取边缘强度(如,边缘强度的值可以采用经典的Sobel算子、Laplace算子等来进行边缘检测),然后取高频小波系数和低频小波系数的边缘强度中(包括高频小波系数HLm、LHm、HHm及低频小波系数LLm各自对应的边缘强度,m指小波系数所对应的层数,本实施例中针对第三层时m取值为3)的最大值作为亮度边缘强度。可选的,对于色度边缘强度(u或v所对应的边缘强度)的计算,可以对高频小波系数和低频小波系数均提取边缘强度,然后取高频小波系数和低频小波系数的边缘强度中的最大值作为色度边缘强度,色度分量的高频小波系数一般很弱,也可以只提取低频小波系数的边缘强度,以节省计算量。本实施例在对图像的高频小波系数降噪时,参考了至少一个分量所对应的边缘强度,且计算一个分量的边缘强度时,参考了其高频小波系数和低频小波系数,从而在滤除高频噪声的同时,可以保留图像更多的细节信息。
进一步的,所述衰减函数具体为小波阈值函数,可以包括以下中的至少一个:硬阈值函数、软阈值函数。具体地,所述衰减函数可以为硬阈值或软阈值函数,或者,硬阈值和软阈值相结合的衰减函数等。本实施例中以软阈值函数为例来进行处理。如下式子为软阈值函数的一种:
其中,T为阈值,阈值的确定方法可以采用已有的各种方法,本发明实施例对此不作限定。
对图像的高频小波系数,参考了图像的亮度和色度的边缘强度,进行软阈值函数降噪,在滤除高频噪声的同时,仍然可以较好地保留图像的细节信息。
步骤四:对步骤二处理后的第三层低频小波系数LL3、步骤三处理后的第三层高频小波系数HL3、LH3、HH3进行小波重构,得到降噪后的第二层(即第n-1层)低频小波系数LL2;
步骤五:对步骤四中所述降噪后的第二层(即第i层,i初始值为n-1)低频小波系数LL2进行与步骤二类似的操作,得到二次降噪后的第二层低频小波系数LL2(注意:由于LL3与LL2代表了不同尺度(层次)、不同频率的信息,从而,这样可以对不同尺度、不同频率分别降噪);对第二层高频小波系数HL2、LH2、HH2进行与步骤三类似的操作,得到降噪后的第二层高频小波系数HL2、LH2、HH2;
此时i的值为2,即i>1,则对步骤五降噪后的LL2、HL2、LH2、HH2进行小波重构,得到降噪后的第一层(即第i-1层)低频小波系数LL1;
步骤六:对步骤五中所述降噪后的第一层低频小波系数LL1进行与步骤二类似的操作,得到二次降噪后的第一层低频小波系数LL1;对第一层高频小波系数HL1、LH1、HH1进行与步骤三类似的操作,得到降噪后的第一层高频小波系数HL1、LH1、HH1;
上述步骤相当于在步骤五执行完后,对i进行赋值,令i=i-1;,将此时i的值为1代入步骤二和步骤三。执行完步骤二和步骤三后,i的值为1,则当i=1时,根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构,可以得到降噪后的一个分量,即对步骤六降噪后的LL1、HL1、LH1、HH1进行小波重构,得到降噪后的色度分量u。
对v分量可以参考上述步骤一~步骤六进行处理,得到降噪后的色度分量v。
将亮度分量和上述降噪后的色度分量组合,得到去除了彩色噪声后的图像,如图7(a)和图7(b)所示,分别为原始含噪图像和对该图像去彩色噪声后的图像。可以看出,原始图像中车的颜色本身是灰色的,但图7(a)中包含了大量的红、蓝、绿等彩色噪声,显得花花绿绿,但图7(b)因为去除了这些彩色噪声,图像的噪声就干净很多。
进一步可选的,在本发明的另一个实施例中,可以参考上述步骤一~步骤六对亮度分量y进行降噪处理,这种情况下,去除的是亮度噪声。将降噪后的亮度分量和上述降噪后的色度分量组合,可以得到去除了亮度噪声和彩色噪声后的图像,如图7(c)所示意的,可以看出,图像在去除了噪声的同时,细节也保持很好。
需要说明的是,对不同的分量进行处理时,所涉及的各个函数,包括y=f(x)、y=g(x)以及衰减函数等,可以相同,也可以不同,确定这些函数的方法也可以相同或不同,具体可根据需要进行调整,本发明对此不作限定。
以上各实施例提供的用于图像降噪的方法,可以应用于终端拍照时对图像进行降噪处理,可以提升拍照图像的质量和用户的体验。
本发明实施例还提供了一种用于图像降噪的终端,如图8所示为本发明提供的终端的一个实施例,在该实施例中,所述终端包括:
图像获取单元800,用于获取图像的图像数据;
图像分解单元810,用于对所述图像数据的y、u、v三个分量中的至少一个分量进行小波分解,得到每个分量的高频小波系数和低频小波系数,其中,y为图像的亮度,u、v为图像的色度;
图像降噪处理单元820,用于对所述每个分量的低频小波系数进行递归降噪,得到所述每个分量降噪后的低频小波系数,根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量;
降噪图像获取单元830,用于当所述降噪后的至少一个分量为三个分量时,将所述降噪后的三个分量组合,得到降噪后的图像数据;当所述降噪后的至少一个分量为一个或两个分量时,将所述降噪后的至少一个分量与所述三个分量中的其他分量组合,得到降噪后的图像数据。
在本发明提供的终端的一个实施例中,所述终端还包括图像高频处理单元840,用于对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪,包括根据如下公式,对所述每个分量的高频小波系数进行降噪,
y=αx+(1-α)h(x),其中α是与边缘强度相关的参数,h(x)是关于x的衰减函数;
所述图像降噪处理单元820用于根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量具体为,用于根据所述每个分量降噪后的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的所述至少一个分量。
本发明提供的终端的一个实施例中,所述图像分解单元810具体用于对所述图像数据的亮度分量y、色度分量u和v三个分量中的至少一个分量进行n层小波分解,得到每个分量的n层高频小波系数和n层低频小波系数,其中n≥2,n为整数;
所述图像降噪处理单元820具体用于对所述每个分量进行如下处理:
A:对第n层的低频小波系数进行递归降噪,得到第n层降噪后的低频小波系数,根据所述第n层降噪后的低频小波系数与第n层的高频小波系数进行小波重构,得到第n-1层降噪后的的低频小波系数;
B:对第i层降噪后的低频小波系数进行递归降噪,得到第i层二次降噪后的低频小波系数,其中1≤i≤n-1,i为变量,i为整数,i初始值为n-1;
C:
当i>1时,根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构,得到第i-1层降噪后的低频小波系数,对i进行赋值,令i=i-1;,返回步骤B;
当i=1时,根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构,得到降噪后的一个分量。
本发明提供的终端的一个实施例中,所述终端还包括图像高频处理单元840,用于对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪,包括根据如下公式,对所述每个分量的所述n层的每一层高频小波系数进行降噪,
yj=αjxj+(1-αj)h(xj),j≥1,j为整数;
其中,yj为第j个高频小波系数降噪后的值,xj为第j个高频小波系数的值,h(xj)是关于xj的衰减函数,αj是第j个高频小波系数所对应的像素点的边缘强度对应的边缘强度系数,0≤αj≤1。
本发明提供的终端的一个实施例中,所述图像降噪处理单元820用于根据所述第n层降噪后的低频小波系数与第n层的高频小波系数进行小波重构,得到第n-1层降噪后的低频小波系数具体为,用于根据所述第n层降噪后的低频小波系数与第n层降噪后的高频小波系数进行小波重构,得到第n-1层降噪后的低频小波系数;
所述图像降噪处理单元820用于根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构具体为,用于根据所述第i层二次降噪后的低频小波系数与第i层降噪后的高频小波系数进行小波重构。
本发明提供的终端的一个实施例中,所述递归降噪,包括:
在至少一个方向上,第k个低频小波系数的降噪结果=第k个低频小波系数的值+f(第k-1个低频小波系数的降噪结果-第k个低频小波系数的值),其中k>1,k为整数,其中y=f(x)为降噪强度函数,x表示第k-1个低频小波系数的降噪结果与第k个低频小波系数的差,y表示降噪强度。
本发明提供的终端的一个实施例中,所述终端还包括细节恢复单元821,用于在所述图像降噪处理单元820对所述第k个低频小波系数进行递归降噪后,根据如下公式,对所述第k个低频小波系数进行细节恢复;
第k个低频小波系数的细节恢复结果=第k个低频小波系数的降噪结果+g(第k个低频小波系数的值-第k个低频小波系数的降噪结果),其中y=g(x)为细节保持强度函数,x表示第k个低频小波系数的值与第k个低频小波系数的降噪结果的差,y表示细节保持强度的值。
本发明提供的终端的一个实施例中,所述第j个高频小波系数所对应的像素点的边缘强度包括:第j个高频小波系数所对应的像素点所对应的y、u、v三个分量中的至少一个分量所对应的边缘强度。
本发明提供的终端的一个实施例中,所述至少一个分量所对应的边缘强度为基于所述至少一个分量的高频小波系数和低频小波系数的边缘强度。
本发明提供的终端的一个实施例中,所述衰减函数为小波阈值函数,包括以下中的至少一个:硬阈值函数、软阈值函数。
本发明提供的终端的一个实施例中,所述至少一个方向包括以下中的至少一个:从左向右、从右向左、从上向下、从下向上。
本发明提供的终端的各实施例中各单元执行的步骤及各步骤的具体内容可以参考上述方法实施例中的相关部分,在此不再赘述。
本发明实施例还提供了一种用于图像降噪的终端,如图9所示为本发明提供的终端的一个实施例,在该实施例中,所述终端包括存储器、处理器和通信总线,所述处理器通过所述通信总线与所述存储器连接。进一步地,所述终端还可以包括通信接口,通过通信接口与其他设备(例如其他终端或接入点设备等)通信连接。
所述存储器可以为一个或多个,用于存储所述终端获取的图像的图像数据,以及存储实现用于图像降噪的方法的指令;其中,所述图像数据和所述指令可以存储在同一个存储器中或是分别存储在不同的存储器中;
所述处理器可以为一个或多个,当所述一个或多个处理器调取所述一个或多个存储器中存储的图像数据以及实现用于图像降噪的方法的指令时,可以对所述图像数据执行如下步骤:
对所述图像数据的亮度分量y、色度分量u和v三个分量中的至少一个分量进行小波分解,得到每个分量的高频小波系数和低频小波系数;
对所述每个分量的低频小波系数进行递归降噪,得到所述每个分量降噪后的低频小波系数;
根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量;
当所述降噪后的至少一个分量为三个分量时,将所述降噪后的三个分量组合,得到降噪后的图像数据;
当所述降噪后的至少一个分量为一个或两个分量时,将所述降噪后的至少一个分量与所述三个分量中的其他分量组合,得到降噪后的图像数据。
其中,所述一个或多个处理器调取所述图像数据以及实现用于图像降噪的方法的指令时,可以是一个处理器调取所述图像数据以及所述指令,所述图像数据和所述指令也可以由不同的处理器分别去调取。
在本发明提供的终端的一个实施例中,所述处理器在调取所述一个或多个存储器中存储的图像数据以及实现用于图像降噪的方法的指令时,还可以对所述图像数据执行如下步骤:对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪;
所述对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪包括:
根据如下公式,对所述每个分量的高频小波系数进行降噪,
y=αx+(1-α)h(x),其中α是与边缘强度相关的参数,h(x)是关于x的衰减函数;
所述处理器根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量,具体为:
根据所述每个分量降噪后的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的所述至少一个分量。
在本发明提供的终端的一个实施例中,所述处理器对所述图像数据的亮度分量y、色度分量u和v三个分量中的至少一个分量进行小波分解,得到每个分量的高频小波系数和低频小波系数,包括:
对所述图像数据的亮度分量y、色度分量u和v三个分量中的至少一个分量进行n层小波分解,得到每个分量的n层高频小波系数和n层低频小波系数,其中n≥2,n为整数;
所述对所述每个分量的低频小波系数进行递归降噪,得到所述每个分量降噪后的低频小波系数,根据所述每个分量的高频小波系数和所述每个分量降噪后的低频小波系数进行小波重构,得到降噪后的至少一个分量包括:
对所述每个分量进行如下处理:
A:对第n层的低频小波系数进行递归降噪,得到第n层降噪后的低频小波系数,根据所述第n层降噪后的低频小波系数与第n层的高频小波系数进行小波重构,得到第n-1层降噪后的的低频小波系数;
B:对第i层降噪后的低频小波系数进行递归降噪,得到第i层二次降噪后的低频小波系数,其中1≤i≤n-1,i为变量,i为整数,i初始值为n-1;
C:
当i>1时,根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构,得到第i-1层降噪后的低频小波系数,对i进行赋值,令i=i-1;,返回步骤B;
当i=1时,根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构,得到降噪后的一个分量。
在本发明提供的终端的一个实施例中,所述处理器对所述每个分量的高频小波系数进行基于边缘信息的衰减函数降噪包括:
根据如下公式,对所述每个分量的所述n层的每一层高频小波系数进行降噪,
yj=αjxj+(1-αj)h(xj),j≥1,j为整数;
其中,yj为第j个高频小波系数降噪后的值,xj为第j个高频小波系数的值,h(xj)是关于xj的衰减函数,αj是第j个高频小波系数所对应的像素点的边缘强度对应的边缘强度系数,0≤αj≤1。
在本发明提供的终端的一个实施例中,所述处理器根据所述第n层降噪后的低频小波系数与第n层的高频小波系数进行小波重构,得到第n-1层降噪后的低频小波系数,具体为:
根据所述第n层降噪后的低频小波系数与第n层降噪后的高频小波系数进行小波重构,得到第n-1层降噪后的低频小波系数;
在本发明提供的终端的一个实施例中,所述处理器根据所述第i层二次降噪后的低频小波系数与第i层高频小波系数进行小波重构具体为:
根据所述第i层二次降噪后的低频小波系数与第i层降噪后的高频小波系数进行小波重构。
在本发明提供的终端的一个实施例中,所述递归降噪,包括:
在至少一个方向上,第k个低频小波系数的降噪结果=第k个低频小波系数的值+f(第k-1个低频小波系数的降噪结果-第k个低频小波系数的值),其中k>1,k为整数,其中y=f(x)为降噪强度函数,x表示第k-1个低频小波系数的降噪结果与第k个低频小波系数的差,y表示降噪强度。
在本发明提供的终端的一个实施例中,所述处理器在对所述第k个低频小波系数进行递归降噪后,还可以根据如下公式,对所述第k个低频小波系数进行细节恢复;
第k个低频小波系数的细节恢复结果=第k个低频小波系数的降噪结果+g(第k个低频小波系数的值-第k个低频小波系数的降噪结果),其中y=g(x)为细节保持强度函数,x表示第k个低频小波系数的值与第k个低频小波系数的降噪结果的差,y表示细节保持强度的值。
在本发明提供的终端的一个实施例中,所述第j个高频小波系数所对应的像素点的边缘强度包括:第j个高频小波系数所对应的像素点所对应的y、u、v三个分量中的至少一个分量所对应的边缘强度。
在本发明提供的终端的一个实施例中,所述至少一个分量所对应的边缘强度为基于所述至少一个分量的高频小波系数和低频小波系数的边缘强度。
在本发明提供的终端的一个实施例中,所述衰减函数为小波阈值函数,包括以下中的至少一个:硬阈值函数、软阈值函数。
在本发明提供的终端的一个实施例中,所述至少一个方向包括以下中的至少一个:从左向右、从右向左、从上向下、从下向上。
本发明提供的终端的各实施例中处理器在调取所述一个或多个存储器中存储的图像数据以及实现用于图像降噪的方法的指令时,可以对所述图像数据执行的步骤及各步骤的具体内容可以参考前述方法实施例中的相关部分,在此不再赘述。
还需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关硬件来完成,所述的程序可以存储于一终端的可读存储介质中,该程序在执行时,包括上述全部或部分步骤,所述的存储介质,如:FLASH、EEPROM等。上述实施例中的方法也可以通过图像处理的芯片来实现。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
以上所述的具体实施方式,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,不同的实施例可以进行组合,以上所述仅为本发明的具体实施方式而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何组合、修改、等同替换、改进等,均应包含在本发明的保护范围之内。